【全球快播报】Nature封面:人类又输给了AI,这次是玩赛车游戏
撰文:库珀
编审:寇建超
【资料图】
排版:寇建超
人工智能(AI)的很多潜在应用,涉及与人类交互时做出更优化的实时决策,而竞技或者博弈类游戏,便是最佳的展示舞台。
日前,发表在《自然》杂志上的封面文章报告称,AI 在赛车对战游戏 Gran Turismo(GT赛车)中战胜了世界冠军级人类玩家。这个 AI 程序名为“Gran Turismo(GT)Sophy”,是一种神经网络驱动程序,它在遵守赛车规则的同时,展现出了超凡的行驶速度、操控能力和驾驶策略。
(来源:Nature)
完成这项 AI 程序研发的核心团队来自索尼 AI 事业部(Sony AI),《GT赛车》系列游戏是日本 Polyphony Digital 公司开发,忠实再现了真实赛车的非线性控制挑战,封装了复杂的多智能体交互,该游戏在索尼 PlayStation 及 PSP 等游戏主机平台上皆有发行,是一款极具拟真感操纵体验的热门赛车游戏。
假如有此 AI 程序的加持,人类玩家估计再也跑不过加强版的单机程序了吧?
图|游戏截图(来源:GT赛车)
研究人员认为,此项成果或让赛车游戏变得更有意思,并能提供用来训练职业赛车手和发现新赛车技巧的高水平比赛。这种方法还有望应用在真实世界的系统中,比如机器人、无人机和自动驾驶汽车等。
赛道里的速度与激情
驾驶赛车需要极大的技巧。现代一级方程式赛车展示了惊人的工程精度,然而,这项运动的受欢迎程度与其说与汽车的性能PK有关,不如说与顶级车手在将汽车性能发挥到极限时所表现出的技巧和勇气有关。一个多世纪以来,赛道上的成功一直充满着速度和激情。
图|F1方程式赛车比赛(来源:GNEWS)
赛车比赛的目标很简单:如果你比竞争对手在更短的时间内跑完赛道,你就赢了。然而,实现这一目标需要极其复杂的物理战,驰骋赛道需要小心使用轮胎和道路之间的摩擦力,而这种摩擦力是有限的。
为了赢得比赛,车手必须选择让汽车保持在不断变化的摩擦极限内的轨迹上。转弯时刹车太早,你的车就会慢下来,浪费时间。刹车太晚,当你接近转弯最紧的部分时,你将没有足够的转弯力来保持你想要的路线轨迹。刹车太猛,可能会导致车体旋转。
因此,职业赛车手非常擅长在整个比赛中一圈接一圈地发现并保持赛车的极限。
尽管赛车的操纵极限很复杂,但它们在物理上可以得到很好的描述,因此,它们可以被计算或学习是理所当然的。
近年来,深度强化学习(DRL)已成为 Atari、星际争霸和 Dota 等领域 AI 研究里程碑的关键组成部分。为了让 AI 对机器人技术和自动化产生影响,研究人员必须证明能够成功控制复杂的物理系统,此外,AI 技术的许多潜在应用要求在接近人类的情况下相互作用,同时尊重不精确的人类规范,汽车比赛正是充满这些挑战的典型领域。
图|游戏比赛数据对比(来源:Nature)
近年来,利用全尺寸、大规模和模拟车辆,自主赛车的研究不断加速。一种常见的方法是预先计算轨迹,并使用模型预测控制来执行这些轨迹。然而,当在摩擦的绝对极限下行驶时,微小的建模误差可能是灾难性的。
与其他车手比赛对 AI 建模精度提出了更高的要求,并引入了复杂的空气动力学相互作用,进一步促使工程师改进控制方案,以不断预测和适应赛道的最优轨迹,有朝一日,无人驾驶汽车下赛道与人类车手一决高下,也并非空谈。
“AI赛车手”的炼成
在 GT Sophy 的开发过程中,研究人员探索了各种使用机器学习来避免建模复杂性的方法,包括使用监督学习来建模车辆动力学,以及使用模仿学习、进化方法或强化学习来学习驾驶策略。
为了取得成功,赛车手必须在四个方面具备高度技能:(1)赛车控制,(2)赛车战术,(3)赛车礼仪和(4)赛车策略。
为了控制汽车,车手们对他们的车辆动力学和赛道的特性有详细的了解。在此基础上,驾驶者建立所需的战术技能,通过防守对手,执行精确的演习。同时,驾驶员必须遵守高度精炼但不精确的体育道德规则,最后,车手在模拟对手、决定何时以及如何尝试超车时,会运用战略思维。
模拟赛车是一个需要在具有高度真实、复杂物理环境中进行实时、连续控制的领域,GT Sophy 在这种环境下的成功首次表明,在一系列汽车和赛道类型中,有可能训练出比顶尖人类赛车手更好的人工智能代理。
这一结果可以被视为是计算机在国际象棋、围棋、冒险、扑克牌和星际争霸等竞争性任务持续发展的另一个重要步骤。
图|GT Sophy 的训练(来源:Nature)
值得注意的是,GT Sophy 在短短几个小时内就学会了绕道而行,并超过了数据集中 95% 的人类选手,它又训练了九天时间,累计驾驶时间超过了 45000 小时,跑圈时间减少了十分之一秒,直到圈速停止改善。
单凭进步奖励还不足以激励AI程序赢得比赛。如果人类对手的速度足够快,AI程序将学会跟随,并在不冒潜在灾难性碰撞风险的情况下尝试积累更多奖励,实现超车。
为了评估 GT Sophy,研究人员在两项赛事中让 GT Sophy 与顶级 GT 车手进行了较量,GT Sophy 在所测试的三条赛道上都取得了超人的计时表现,它能够执行几种类型的转弯,有效地利用漂移,扰乱后面车辆,拦截对手并执行其他紧急操纵。
尽管 GT Sophy 展示了足够的战术技能,但仍有许多方面有待改进,尤其是在战略决策方面。例如,GT Sophy 有时会在同一条跑道上留出足够的空间,让对手有机可乘。
图|AI 车手超越人类玩家(来源:Nature)
竞技游戏外更值得关注
关于电子竞技、博弈类的游戏,AI 能战胜人类早已经不是什么稀奇事,而且可以肯定的是,AI 还会越来越强,即便是人类顶尖选手也只能甘拜下风,但能赢电子比赛并没有太多悬念和意义,关键还是看这些超越人类的 AI 程序如何切实攻克产业瓶颈,真实造福人类生活。
1996 年 2 月 10 日,超级电脑 Deep Blue 首次挑战国际象棋世界冠军 Kasparov 以 2:4 落败。1997 年 5 月再度挑战,最终Deep Blue 以 3.5:2.5 击败了 Kasparov ,成为首个在标准比赛时限内击败国际象棋世界冠军的电脑系统。
但 Deep Blue 的缺陷是没有直觉,不具备真正的“智能灵魂”,只能靠超强的计算能力弥补分析思考方面的缺陷,赢得比赛的 Deep Blue 很快也退役了。
2016 年 3 月,谷歌 AI 的 AlphaGo 在四场比赛中击败了围棋世界冠军李世石,被认为是 AI 真正意义上的里程碑,AlphaGo 当时使用了蒙特卡洛树搜索与两个深度神经网络相结合的方法,在这种设计下,电脑可像人类大脑一样自发学习进行分析训练,不断学习提高棋力。
自此之后,各类 AI 程序新秀层出不穷,2018 年 12 月 10 日,DeepMind 针对即时战略游戏星际争霸开发的人工智能 AlphaStar 能完虐全球 99.8% 的人类职业选手。
无疑,现在的 GT Sophy 又是一个 AI 胜利的延续。
来自斯坦福大学机械工程系教授 J.Christian Gerdes 认为,GT Sophy 研究所带来的影响也许能远远超出电子游戏范畴,随着许多公司致力于完善运送货物或乘客的全自动车辆,关于软件中有多少应该使用神经网络,以及有多少应该仅基于物理,值得进一步去探索。
总的来说,在感知和识别周围环境中的物体时,神经网络是无可争议的冠军。然而,轨迹规划仍然是物理和优化领域,GT Sophy 在游戏赛道上的成功表明,神经网络有一天可能会在自动化车辆的软件中发挥比今天更大的作用。
更具挑战性的可能是每圈的变化。真实情况下,赛车的轮胎状况在每圈之间都会发生变化,人类驾驶员必须在整个比赛过程中适应这种变化。GT Sophy 能用更多的数据做同样的事情吗?这些数据从何而来?这将使得人工智能有更多进化空间。
参考资料:
https://www.nature.com/articles/s41586-021-04357-7
https://www.nature.com/articles/d41586-022-00304-2
推荐
-
焦点资讯:速度翻倍!苹果新旗舰要上USB4.0:iPhone14不香了
前不久,USB推进组织发布了最新的USB4 0Version2 0标准,新规范最大的变化就是带来了80Gbps的传输速率...
来源:雷科技 -
世界动态:性能增加10%!联想新款移动工作站确认:居然用键盘加强散热
9月2日,联想官宣了新款移动工作站ThinkPadP1隐士2022,目前尚未公布售价。其采用了一种特殊的散热设计...
来源:雷科技
精彩放送
-
覆盖全国多地,惠及超18万人次:“智体双百”公益计划持续推进
2021年9月,腾讯智体双百公益计划正式对外公布。该计划由腾讯成长守护、腾讯游戏联合腾讯SSV共同发起,...
-
【独家】意念生成语音!国内首个半侵入式脑机接口设备发布:助健截瘫病人
9月2日,脑虎科技在2022世界人工智能大会发布了国内首个半侵入式脑机接口设备,还有高频脑电信号处理仪...
-
即时:19999元!三星高端电竞显示器上线:购买就送PS5
9月2日消息,近日,三星在海外发布玄龙骑士Ark电竞显示器,目前已经在国内官网上线。据悉,这款显示器是...
-
焦点资讯:速度翻倍!苹果新旗舰要上USB4.0:iPhone14不香了
前不久,USB推进组织发布了最新的USB4 0Version2 0标准,新规范最大的变化就是带来了80Gbps的传输速率...
-
全球百事通!身价暴涨五倍!磁带播放器需求突然暴涨:二手交易赚疯了
9月2日,据日经中文网报道,曾被市场淘汰的磁带播放器正以一种暴风般的速度成为新的潮流,但由于这种设...
-
动态:水熊虫,大自然的“宠儿”
科普云
-
世界热门:第二届“共同行动 助力碳中和”论坛举行,联想详述“碳”路实践
8月27日,由国家发展改革委国际合作中心、生态环境部环境与经济政策研究中心、北京大学光华管理学院共同...
-
世界动态:性能增加10%!联想新款移动工作站确认:居然用键盘加强散热
9月2日,联想官宣了新款移动工作站ThinkPadP1隐士2022,目前尚未公布售价。其采用了一种特殊的散热设计...
-
世界快播:硬刚任天堂!微软XGP家庭订阅计划更新:可与朋友共享会员服务
9月2日,微软公布了关于XGP家庭会员的新计划,由传言中的“家庭共享”升级为“与朋友及家人共享”,目前...
-
全球观速讯丨要取代手机了?二季度中国AR/VR设备出货暴涨:市场份额提高
9月2日,国际数据研究机构IDC发布了中国上半年AR VR设备市场报告,今年第二季度,中国AR VR设备出货30...
-
速讯:iPhone最强游戏配件?雷蛇新款游戏手柄来了:物理接口加持
9月2日,继雷蛇发布Android版KishiV2游戏手柄后,今天又推出了适用于iPhone的版本。(图片来自雷蛇官方...
-
讯息:比iPhone超大杯还贵!森海塞尔新款高端音响来了:音效很强
近日,在2022年的IFA展会上,森海塞尔推出了新款条形音响AmbeoSoundbarPlus,扩大了Ambeo系列的产品阵容...
-
热议:英雄体育VSPN与杜比战略合作,助力电竞视听体验升级革新
上海,2022年9月2日——英雄体育VSPN与沉浸式娱乐领域的领导者杜比实验室(纽交所代码:DLB)达成长期战...
-
比雷电4还要翻倍!USB42.0标准发布 接口速度提升到80
USB推进组织昨晚发布了新一代的USB4 2 0标准,接口速度从目前的40Gbps提升到了80Gbps,比雷电4还要翻...
-
今日关注:蔚来重回第一!单月交付量破万:同比增长81.6%
9月1日消息,近日,蔚来公布了8月销量“成绩单”。据悉,蔚来8月一共交付了10677辆新能源汽车,同比增长...
-
全球焦点!3999元!汉王新款墨水屏显示器来了:自研高刷技术加持
9月1日,汉王发布了新款墨水屏显示器PM1301,首发价为3999元。站在显示屏的角度,这款产品着实不便宜了...
-
今日播报!眼红潮鞋太能赚?LG推出首款智能鞋盒:可360度展示鞋子
9月1日,LG在IFA2022上展示了一款名为StylerShoeCase的智能鞋盒,鞋盒采用侧面透明设计,内置旋转底盘,...
-
每日看点!重新定义生产力!联想新款折叠屏笔记本来了:一台更比两台强
9月1日,笔记本大厂联想集团推出了第二代折叠屏笔记本ThinkPadX1Fold,官方宣称新笔记本集合了工业设计...
-
每日观点:DXO排名背后,如何评价各大厂商手机影像实力?
近日手机界最热门的新闻莫过于小米的影像旗舰小米12SUltra在DXO的测试中得到了一个较为不合理的分数,一...
-
【世界独家】全球首个航天净水联合实验室亮相深圳,安吉尔再造净水科技新引擎
9月1日,安吉尔与中国航天(航天生物)联合打造的全球首家航天净水联合实验室于深圳安吉尔工业园正式亮...
-
灵感随身 精巧随行 索尼微单™手机Xperia 5 IV正式发布
2022年9月1日,索尼正式发布小尺寸性能旗舰微单手机Xperia 5 IV。新品设计精巧轻便,配色时尚,仅重17...
-
全球热消息:外卖不用点了!小米发布米家烹饪机器人:一键解放双手
9月1日消息,近日,小米正式发布了米家烹饪机器人。据悉,米家烹饪机器人拥有多功能烹饪功能,像蒸、炒...
-
速读:超市也涨价!沃尔玛旗下山姆会员店年费上调:9年来首次提价!
9月1日,全球最大零售业公司沃尔玛宣布旗下会员制商店山姆会员店将于秋季上调订阅年费,普通会员年费价...
-
世界报道:AutoX安途开进上海浦东,竟是为L5做准备?
9月1日,上海WAIC2022世界人工智能大会在上海世博中心正式开幕。在会上,AutoX(安途)宣布推出了上海第...
-
快报:防不胜防!山寨版iPhone 14抢先发布:外观太像了
谁也没想到的是,距离iPhone14系列发布只剩下不到一周的时间,山寨版的iPhone14ProMax就已经抢先在国内...
-
当前通讯!Micro OLED加持!联想AR眼镜来了:省了买显示器的钱
9月1日,知名笔记本大厂联想正式发布GlassesT1AR眼镜,官方称其为可穿戴的“私人显示器”,目前尚未公布...
-
全球快播:《死亡循环》入库!PS+港服会员免费游戏公开:老款掌机也有份
9月1日,索尼公开了港服PlayStation+三档会员免费游戏,其中会免游戏与欧美服保持一致,但二档 三档新...
-
OPPO Watch 3和华为Watch 3哪个好 这些细节见分晓
随着智能穿戴设备市场不断推陈出新,消费者的选择也越来越多,不少人会在选购时进行对比。以选购智能手...
-
苹果又玩创新了!感叹号屏幕被连成药丸形状的视觉挖孔
iPhone 14 Pro系列今年在外形上跟普通版有点不一样,据说苹果要启用感叹号屏,不少网友吐槽更丑了,但...
-
视讯!云鲸最新一代扫拖机云鲸器人正式发布,解锁J3小鲸灵的八大亮点
云鲸发布了最新一代产品的宣传片,正式推出第三代扫拖一体机器人——J3小鲸灵。云鲸J3小鲸灵于8月31日20...
-
全球热门:每月超2亿人在P图!美图公司发布年中财报:VIP订阅稳赚3亿
8月31日,美图公司发布2022年年中财报,半年实现营收9 72亿元,月活用户达到2 409亿,大部分收入来自...
-
焦点快报!比亚迪同款动力总成!国产新车即将上市:起步价15万
8月31日消息,近日,创维汽车官方宣布,旗下中型SUV-创维HT-i将在9月5日正式上市。据悉,新车搭载的是比...
-
世界球精选!充电线都省了!韩国搞出最新黑科技:能给30米外的手机充电
近日,据美国光学学会旗下主打开源期刊Optica的报道,韩国世宗大学的研究团队开发出了一种新系统,可以...
-
当前滚动:畅想教育未来,联想在大山深处勾绘“智能化”蓝图
8月30日上午,联想-田字格未来村小项目启动暨一期智慧校园交付仪式在贵州省黔西南州贞丰县必克实验小学...
-
【全球独家】上海工厂就是快!特斯拉提车等待时间再缩短:欧美消费者羡慕
8月31日消息,近日,特斯拉官网显示,特斯拉ModelY的后轮驱动版本预计交付速度更快了,由原来的4-8周缩...
-
天天实时:时代眼泪!技术主播魔改三星折叠屏旗舰:改成Win系统手机
近日,有媒体报道,海外知名YouTube主播MarkSpurrell搞了一个大动作,将三星最新款的高端折叠屏手机Gala...
-
全球最新:特斯拉慌了!蔚来总裁再放豪言:一年内ET5销量超越宝马3系
作为蔚来第二款轿车,蔚来ET5被给予厚望。近日,在成都车展举办期间,蔚来总裁秦力洪在蔚来展台上再放豪...
-
世界快消息!耳机还带显示屏?JBL发布首款智能充电盒耳机:能接收消息
8月31日,全球最大的扬声器厂商JBL发布了一款全新的TWS耳机——JBLTourPro2,这款耳机的独特之处在于配...
创投更多》
-
欧菲光上半年净利亏损8.74亿 因苹果终止采购关系?
8月30日消息,日前,欧菲光发布2022年半...
-
欧菲光上半年净利亏损8.74亿 因苹果终止采购关系?
8月30日消息,日前,欧菲光发布2022年半...
-
映宇宙:上半年总收入40.6亿元 商誉减值亏损约为1.1亿元
8月29日消息,映宇宙发布截至2022年6月3...
-
贾跃亭的FF91量产有新转机 有望2022年第三季度启动交付
对于贾跃亭来说,FF91的量产交付迟迟没...
-
44家上市企业一年财报:小家电撑不起千亿市值
作为互联网原住民,这届年轻人极其热衷...