2017年OpenAI的人工智能在知名即时战略游戏《Dota 2》的1对1比赛中,击败人类好手Danylo Ishutin(Dendi),而当时Elon Musk就曾夸下海口,在2018年8月OpenAI的人工智能团队OpenAI Five,就会在五对五游戏中击败世界第一的人类团队。现这个目标看起来越来越接近了,OpenAI Five现在的水准已经达玩家平均之上了。
人工智能在游戏中赢过人类是一大里程碑,就像之前人工智能在国际象棋或是象棋中赢过人类一样,但是Dota以及StarCraft这类的即时战略游戏复杂度完全不同,OpenAI表示,操作Dota的人工智能必须要掌握4个要点,首先是更长的游戏历程,国际象棋多数在40手后结束,象棋比较长约为150手,但Dota游戏平均一局的游戏时间是45分钟,每场游戏需要执行8万次动作,当然有一些行为影响较小,部分行为可以影响游戏战略,而更有一些策略需要在整个游戏中贯彻,OpenAI Five在每场游戏至少需要产生2万次的动作。
另外,人工智能还要有观察部分区域的能力,由于战雾的关系玩家都只能收集到部分资讯,而国际象棋与象棋都是全讯息公开的。再来Dota是个高连续动作空间的游戏,也就是说每个英雄可以进行数十种动作,许多动作可以对单位或是对地,平均每个英雄有170,000个动作空间,有效动作约略为1,000种,但国际象棋只有35种,象棋也只有250种。最后,人工智能还需要掌握高维度连续观察空间,OpenAI透过Valve提供的Bot API观察发现,游玩Dota时人类可取得资讯高达2万条,但国际象棋只有70条,而象棋比较多但也仅有400条。
OpenAI Five学习游玩Dota的方法完全来自电脑互相对战,而不使用来自人类的资料,并使用大规模版本的Proximal Policy Optimization进行学习。OpenAI Five花费80%的时间与自己对战,另外20%与过去的自己对战,以避免策略崩溃(Strategy Collapse)。OpenAI Five为了要打过人类,也是很努力的接受训练,系统硬件等级已经与去年训练1对1的人工智能全然不同,使用的CPU核心数量超过之前的2倍达128,000个,以及256个P100 GPU,每天取得180年的游戏经验,每个角色分开计算则每天约900年。
研究人员认为,要人工智能掌握长时间游戏历程并非一件容易的事,需要从根本上的改进算法,他们并透过延长未来奖励的半衰期,让人工智能在选择动作时倾向以未来为重。专业Dota评论员Blitz透过观看OpenAI Five对战的情形推测,其目前程度大概落在玩家的中位数,尽管人工智能最后一击表现较弱,但是已能合作使用常见的专业策略,在地图控制上也会倾向取得长期回报而牺牲短期回报。
目前为止,OpenAI Five在5月15日跟程度落在第46百分位数的最佳OpenAI员工队打成平手,但在6月6日,OpenAI Five压倒性的打败最佳OpenAI员工队,另外还打败了团队成员未曾一起合作过,但程度落在第90到99百分位数的观众队,以及成员排名落在第46到90百分位数的Valve员工队。除此之外,与第93百分位数的业余队还有第99百分位数半职业队交战的结果,在前三场比赛取得三战两胜的佳绩。由此趋势看来,8月OpenAI Five与世界第一团队之战,还颇具看头。
相关文章
- YouTube更新违反规定政策,提升惩处透明度和一致性
2023-12-31 14:00:52
- 传苹果将把中国iCloud正式交给本地化经营 苹果手机icloud换区存储操作
2023-12-27 18:34:43
- 刘德华代言什么手机?刘德华成华为Mate 60 RS非凡大师华为5G新手机代言人
2023-09-26 21:55:08
- WebOS新系统:Palm Pre手机最新款高价登港
2023-06-23 15:39:14
- 帮助企业组织对抗勒索软件,资安通报机构设立防护专区,可协助事前、事中与事后因应
2023-06-22 09:36:10
- 蔚来全系产品降价3万 取消免费换电 换一次电池180元
2023-06-12 17:27:49
- 电商平台三巨头开打最大规模折扣 价格战再次打响
2023-03-05 18:58:40
- 爱立信节省成本裁员四千人 爱立信全球员工总数五分之一
2023-02-24 22:27:29
- 蜜芽关停近况,八位数重金买三字顶级新域名mia.com也关闭
2023-02-23 16:18:14
- 联想CEO杨元庆:联想集团需要裁员32%削减部分业务支出
2023-02-18 12:45:25
- 蓝色光标2022营收亏损18亿 客户预算减少明显
2023-02-18 12:40:08
- 三星工厂或将80%生产转至越南 因本地劳动力成本上升
2023-02-17 23:09:16
- 香港八达通卡如何激活?没用失效过期余额怎么办
2023-02-17 18:34:51
- 中兴通讯被曝将裁员20% 称只裁国外的
2023-02-17 18:33:26
- 苹果新iPhone15Pro手机终于改用USB-C(火牛)数据线??Lightning充电接口退出
2023-02-17 16:57:22
- 突发!蓝色光标曾为中国民企500强龙头 如今业绩亏损断崖下跌
2023-02-16 14:31:19
- 三星发布自家carplay车载中控系统 Car Mode for Galaxy 可以连接carplay吗?
2023-02-14 00:53:17
- Opera浏览器宣布集成ChatGPT 一键生成网页内容摘要
2023-02-14 00:32:08
- 谷歌google计划重返进入中国市场?但结果可能令你失望
2023-02-13 16:57:15
- Zoom紧急裁员1300人 佔员工总数15%
2023-02-08 14:59:11
最新资讯
- YouTube更新违反规定政策,提升惩处透明度和一致性2023-12-31 14:00:52
- 美国法院裁定阿里须为Squishmallows玩具侵权案答辩2023-12-28 19:59:34
- 小米汽车传员工3700人 雷军称小米汽车不可能卖9万92023-12-28 19:41:57
- 吉利飙逾6% 电动车品牌极氪新车款极氪007昨上市 预售价格22.99万元2023-12-28 19:30:28
- 日本丰田汽车厂11月全球产量创新高2023-12-28 19:26:02
手机
- 中国11月手机出货量增34% 5G手机出货量2709.2万部2023-12-28 19:27:57
- 荣耀发布新一代旗舰荣耀Magic5系列,新款上市价格分期0首付3999元起2023-03-06 16:12:32
- 美国商务部指违禁,长江存储被美国拜登制裁名单面临停工裁员2023-02-17 18:41:53
- 苹果Apple iOS车载系统CarPlay支持哪些更多汽车品牌2023-02-02 17:33:27
- 香港去哪买三星手机回来吗? 买香港便宜售价手机市场地点和网站2023-02-02 11:03:11
数码
- 华为5G芯片正式亮相:预示华为将发首款5G手机2023-08-31 13:22:33
- 腾讯传计划放弃虚拟现实VR硬件计划2023-02-17 23:32:30
- 三星手机份额大跌!三星手机中国市场份额变化国内仅剩3%2023-02-01 17:06:15
- 三星手机份额大跌在中国没市场了!国内市场占有率仅剩1%国外比苹果销量高2023-02-01 16:59:53
- vivo发布2022 vivoNEX手机极简易浏览器下载:简洁流畅无广告!2022-12-02 17:29:30
科技
- 中兴受美国制裁事件 被罚了20亿美元过程事件始末 中兴被制裁后公司现状2023-11-02 22:12:46
- B站怎么炸崩了哔哩哔哩服务器今日怎么又炸挂了?技术团队公开早先原因2023-03-06 19:05:55
- 苹果iPhoneXS/XR手机电池容量续航最强?答案揭晓2023-02-19 15:09:54
- 华为荣耀两款机型起内讧:荣耀Play官方价格同价同配该如何选?2023-02-17 23:21:27
- google谷歌原生系统Pixel3 XL/4/5/6 pro手机价格:刘海屏设计顶配版曾卖6900元2023-02-17 18:58:09