在今年八月份于吉隆坡举办的王者荣耀「世界冠军杯」半决赛的特设环境中,腾讯 AI Lab 与天美工作室合作开发的策略协作型 AI「绝悟」一经亮相就在与职业选手的 5V5 对抗游戏当中获得胜利,而在同年的上海 ChinaJoy 现场,「绝悟」也开放了和业余选手 1V1 竞争的体验测试,四天一共进行了 2100 场对抗,最终取得了 99.8% 的胜率。
最近腾讯 AI Lab 和天美工作室联合发表了一篇论文,详细揭秘了「绝悟」取得不败战绩背后的开发故事。
正如研究人员在论文当中指出的那样,《王者荣耀》这类实时战略 MOBA 游戏不同于传统棋盘游戏和雅达利游戏,前者需要更高难度的复杂操作,所处的游戏环境也会更加复杂。以《王者荣耀》为例,一局游戏当中可能会涉及 10 ^ 600 种游戏可能性以及 10 ^ 18000 中可能的游戏操作,并且这还只是基础,AI 还需要在 MOBA 游戏当中发动 GANK、防御、诱导对手、补刀等,而且还可能涉及到复杂的技能连招。
腾讯的研究人员通过系统编码图像特征和游戏状态信息,将游戏中的不同单元和敌方目标以数字的形式表示,这一框架在总共 60 万个处理器和 1064 张显卡(包括NVIDIA Tesla P40s 和 NVIDIA V100s)上运行,处理了 16000 个包含非隐藏的单位属性和游戏信息。而训练一名英雄需要用到 48 块显卡和 18000 个处理器内核,系统将以每秒 80000 个样本的速度进行持续训练。目前该系统的训练量已经相当于人类花费 500 年所积累的经验。
根据研究人员的说法,「绝悟」在经过系统训练 80 个小时之后便已经「出师」,但其实在经历了 30 个小时的训练之后,「绝悟」就已经具备了打败排位前 1% 玩家的能力。经历完整训练的 AI 将能够在 0.1 秒内 做出反应,这已经相当于一个顶级业余选手的反应。
在和真实玩家的较量中,尽管对手是经验丰富职业选手,但「绝悟」还是取得了场均五个击杀,而场均死亡仅 1.33 的数据。而在今年的 ChinaJoy 活动现场,「绝悟」一共与现场玩家进行了 2100 场 1V1 对战,胜率高达 99.81%,其中 AI 控制的八名英雄中,更是有五名取得了 100% 的胜率。
腾讯研究人员表示,他们计划在不久的将来将其框架和算法开源,以促进对《王者荣耀》等复杂游戏的研究发展。