AI玩赛车游戏登上Nature封面!击败人类冠军

智东西(公众号:zhidxcom)
编译|ZeR0
编辑|漠影
新的索尼大法来了!
智东西2月10日报道 , 今日 , 索尼AI部门SonyAI重磅宣布 , 其AI程序击败了世界上最顶级的赛车游戏选手 , 并登上国际学术顶刊Nature的封面 。
AI玩赛车游戏登上Nature封面!击败人类冠军
文章图片
论文链接:
https://www.nature.com/articles/s41586-021-04357-7
这是继AI在扑克、象棋、围棋、星际争霸、DOTA等游戏击败人类冠军选手后 , 游戏AI实现的又一里程碑 。
作为全球首个能够在高度拟真赛车模拟游戏中战胜最强人类选手的赛车AI智能体 , 索尼的赛车游戏AIGTSophy仅用一两天磨练战术和技巧 , 就做到了超过赛车模拟游戏《GT赛车》中可以击败95%的人类玩家 。 在训练总计45000小时后 , 这个AI程序已经能与顶级GT赛车玩家一较高下 。
AI玩赛车游戏登上Nature封面!击败人类冠军
文章图片
相比此前AI已经掌握的棋牌类游戏及部分多人策略游戏 , 《GT赛车》更加复杂 , 因为它高度模拟现实世界 , 每辆车、每条轨道都经过建模 , 视觉、音频以及动态方面全部尽可能地还原现实世界的驾驶体验 。
这使得AI必须具备极强的持续判断和快速反应能力 , 在高速变动的条件下 , 综合考量摩擦、空气动力学、驾驶路线、速度、方向等各种因素 , 在距离对手几英寸的范围内 , 对具有复杂非线性动力学的车辆进行实时控制 , 并知道如何在不违规的前提下超越对手 。
“在一场正面竞赛中如此超越杰出的人类车手 , 是AI领域的一项里程碑式成就 。 ”共同撰文的斯坦福大学汽车研究中心联席主任克里斯·格迪斯(ChrisGerdes)教授相信 , 用于开发该AI的技术有望在自动驾驶汽车软件中发挥作用 。
GitHub链接:
https://sonyai.github.io/gt_sophy_public/
一、比玩星际争霸更强的智能体 , 精通控制、战术和礼仪
GTSophy研究项目启动于2020年4月 , 是一个使用新型深度强化学习平台进行训练的自主AI智能体 , 也是SonyAI自2019年11月成立以来一直致力于应对的关键挑战之一 。
SonyAI以日本、美国和欧洲三地为据点 , 重点推进游戏、成像、传感三个AI旗舰项目 。 SonyAI全球负责人北野弘明还曾放言:“到2050年 , 要让AI凭自己的科研成果拿下诺贝尔奖!”
而今日登上Nature封面的赛车游戏AI , 正是SonyAI韬光养晦、筹谋已久的大招!
过去两年间 , SonyAI团队、《GT赛车》系列背后的游戏开发工作室PolyphonyDigital(PDI)以及索尼互动娱乐(SIE)的云游戏团队密切合作 , 使用SIE管理的云游戏基础设施训练这个AI 。
AI玩赛车游戏登上Nature封面!击败人类冠军
文章图片
为了尽可能重现现实世界的赛车环境 , PDI为PlayStation4创建了超现实主义驱动模拟器GTSport , 并提供API访问 。
GTSport配备了一些最新的汽车动力学模拟 , 逼真地还原了赛车、赛道乃至空气阻力、轮胎摩擦等物理现象 , 并在汽车制造商的指导下严扣从车身曲线、车身面板间隙到大灯形状等每个细节 。
该模拟器是与国际汽联合作设计的 , 在全球拥有超过40万人的电子竞技社区 , 它带来了一个具有明确规则和判断标准的公平赛车环境 。
AI玩赛车游戏登上Nature封面!击败人类冠军
文章图片
GTSophy即是在这个终极模拟环境中训练而出 , 同样 , 分布式训练平台DART也对于该AI新成果功不可没 。
基于这个定制平台 , SonyAI研究人员能在SIE云游戏平台的PlayStation4控制台上训练GTSophy 。