文献综述(或调研报告):
目前的已经建立的游戏平台主要有:
- ViZDoom竞赛
《毁灭战士(Doom)》是ID Software于1993年推出的一款3D FPS(第一人称射击)游戏,也是该类游戏的先驱者。2016年,在深度学习与强化学习兴起的背景下,基于该游戏的 ViZDoom AI竞赛诞生,探索基于原始视觉信息的强化学习技术,吸引到了Facebook FAIR、Intel、Tencent AI Lab等众多顶级AI实验室参与。
《毁灭战士(Doom)》游戏画面
比赛分为2个挑战,其中Track 2的随机对战模式(Death Match)要求AI在同一个地图里对杀10分钟,击杀数-死亡数多者获胜,可以捡血包和武器、可以无限复活。AI基于像素级视觉信息的输入,通过强化学习来习得到控制策略,包括前后左右移动、左右水平旋转、拾取、寻敌、开火等行为。
作为一款20多年前的游戏,游戏整体设计和渲染都比较粗糙。操作上只有位置移动和水平视角移动,不支持跑、跳、蹲等复杂动作,也不支持多人合作。
EA公司的尝试
2018年,EA游戏公司旗下的技术研究部门SEED,也开发了一个3D FPS仿真环境用来进行智能体训练。AI智能体需要在一个类似“吃鸡”的地图中,守卫一块目标区域防止敌方入侵,地图中散布了一些弹药和血包可供拾取。
EA开发的3D FPS仿真环境
AI的信息输入和操作方式与ViZDoom基本一致,但在学习方式上,不仅有强化学习,还有依赖人类带标签数据的模仿学习。从结果上看,AI的走位和操作非常像人类玩家,能同时进行多个操作(比如边移动边转向,同时开火),导航到目标点时不会撞到障碍物,能做到巡逻和保护目标区域。更重要的是,AI能理解自身的状态,比如发现自己没有弹药时主动寻找弹药并避免与敌方交火。
相比于ViZDoom,这款游戏的渲染水平显著提升,但环境的复杂程度距离真实游戏还有距离,而且依旧无法支持复杂动作和多人合作。
DeepMind的进展
早在2016年,DeepMind基于Quake III Arena(雷神之锤3竞技场)开发了第一人称3D游戏平台DeepMind Lab,用于研究通用人工智能(AGI)。2018年,DeepMind宣布其AI智能体已经能在该游戏的夺旗模式中达到人类玩家水平,并且展现出了多智能体间的合作能力。近日DeepMind发表在《Science》的这篇论文介绍了算法细节,并且补充了AI在完整游戏模式上的表现。
以上是文献综述,课题毕业论文、任务书、外文翻译、程序设计、图纸设计等资料可联系客服协助查找。