Openai最新的人工智能研究成果,是用单个机器手掌就能解决魔术方块,他们使用与操作⟪Dota 2⟫人工智能OpenAI Five相同的增强学习程式码,搭配上一种称为自动域随机化(Automatic Domain Randomization,ADR)的新技术,以完全模拟的方式训练机器手掌,现在机器手掌能以60%的成功率解开魔术方块。
对人类来说,单手解决魔术方块也不是一件简单的事,人类孩童需要花费数年的时间,才能掌握单手操作需要的灵巧性。在过去60年的机器人技术,人类需要为困难的任务设计客制化的机器人,因此开发使用通用机器人硬件的方法,一直是近几十年人类的目标,而Openai在这项最新的研究中,使用15年前的机器手掌,搭配最新的方法,在通用机器人硬件操作课题上前进了一步。
Openai利用了神经网络来解决魔术方块的问题,透过增强学习进行模拟,并且使用柯西姆巴(Kociemba)算法以挑选魔术方块解法的步骤,并且利用域随机化(Domain Randomization)将训练模拟转移到真实的机器手掌上。
而让机器手掌操作魔术方块最大的挑战,是在创建的模拟环境中,模拟出真实世界特征,研究人员表示,像是魔术方块或是机器手掌这类复杂的物体,非常难模拟其摩擦、弹性或是动态性,仅是靠现有的域随机化技术是远远不够的,因此为了克服这个问题,他们开发了自动域随机化技术,这个技术可以在模拟训练中产生越来越困难的环境。
自动域随机化训练会从单一且非随机的环境开始,让神经网络先学会解决魔术方块,随着神经网络的表现越来越好,在达到一定的效能阈值时,域随机化的数量便会自动增加,让神经网络应付更随机的环境,使得需要解决的任务更加困难,当神经网络不断学习后,再次超过效能阈值时,便会再加入更多的随机化,然后重复该过程。
自动域随机化的参数有很多种,一开始从固定魔术方块的大小开始,之后随着训练逐渐增加随机范围,变动魔术方块的尺寸和重量,也会随机化机器手指的摩擦力和手的视觉表面材质,神经网络需要在越来越困难的情况下,解决魔术方块。
研究人员提到,过去域随机化需要手动指定随机范围,但这并不容易,太多随机化使得学习太困难,太少又会阻碍模拟转移到真正机器人上的效果,而自动域随机化能够自动扩展随机范围,不需要人工干预,也不需要研究人员对域知识的理解,降低了该方法使用到不同领域的难度,而且由于自动域随机化让训练任务始终具有挑战性,训练成效不会收敛。
自动域随机化让神经网络在无数种随机情况中进行模拟,进而增加了强健性,当神经网络从模拟转移到真实机器人上的时候,就能够快速辨识并适应真实世界的环境条件。研究人员利用了各种扰动,以测试机器手掌解决魔术方块的强健性,包括把机器手掌的两只手指绑起来、戴上橡胶手套、阻碍视觉或是以长颈鹿玩偶随意干扰等。
在施予扰动的初期,机器手掌解决魔术方块的时间都会上升,研究人员解释,这是因为之前学习的策略无法发挥作用,当经神经网络过一段时间学习之后,完成的时间便会下降到之前的水准。
目前Openai的成果,在需要15次翻转才能完成魔术方块的条件,机器手掌有60%的成功率解决魔术方块,但是在需要26次翻转的复杂条件,现在机器手掌就只有20%的成功率。研究人员提到,他们的神经网络在前几次的翻转,魔术方块掉落的概率特别大,这是因为神经网络需要透过初期的翻转适应物理世界。
相关文章
- YouTube更新违反规定政策,提升惩处透明度和一致性
2023-12-31 14:00:52
- 传苹果将把中国iCloud正式交给本地化经营 苹果手机icloud换区存储操作
2023-12-27 18:34:43
- 刘德华代言什么手机?刘德华成华为Mate 60 RS非凡大师华为5G新手机代言人
2023-09-26 21:55:08
- WebOS新系统:Palm Pre手机最新款高价登港
2023-06-23 15:39:14
- 帮助企业组织对抗勒索软件,资安通报机构设立防护专区,可协助事前、事中与事后因应
2023-06-22 09:36:10
- 蔚来全系产品降价3万 取消免费换电 换一次电池180元
2023-06-12 17:27:49
- 电商平台三巨头开打最大规模折扣 价格战再次打响
2023-03-05 18:58:40
- 爱立信节省成本裁员四千人 爱立信全球员工总数五分之一
2023-02-24 22:27:29
- 蜜芽关停近况,八位数重金买三字顶级新域名mia.com也关闭
2023-02-23 16:18:14
- 联想CEO杨元庆:联想集团需要裁员32%削减部分业务支出
2023-02-18 12:45:25
- 蓝色光标2022营收亏损18亿 客户预算减少明显
2023-02-18 12:40:08
- 三星工厂或将80%生产转至越南 因本地劳动力成本上升
2023-02-17 23:09:16
- 香港八达通卡如何激活?没用失效过期余额怎么办
2023-02-17 18:34:51
- 中兴通讯被曝将裁员20% 称只裁国外的
2023-02-17 18:33:26
- 苹果新iPhone15Pro手机终于改用USB-C(火牛)数据线??Lightning充电接口退出
2023-02-17 16:57:22
- 突发!蓝色光标曾为中国民企500强龙头 如今业绩亏损断崖下跌
2023-02-16 14:31:19
- 三星发布自家carplay车载中控系统 Car Mode for Galaxy 可以连接carplay吗?
2023-02-14 00:53:17
- Opera浏览器宣布集成ChatGPT 一键生成网页内容摘要
2023-02-14 00:32:08
- 谷歌google计划重返进入中国市场?但结果可能令你失望
2023-02-13 16:57:15
- Zoom紧急裁员1300人 佔员工总数15%
2023-02-08 14:59:11
最新资讯
- YouTube更新违反规定政策,提升惩处透明度和一致性2023-12-31 14:00:52
- 美国法院裁定阿里须为Squishmallows玩具侵权案答辩2023-12-28 19:59:34
- 小米汽车传员工3700人 雷军称小米汽车不可能卖9万92023-12-28 19:41:57
- 吉利飙逾6% 电动车品牌极氪新车款极氪007昨上市 预售价格22.99万元2023-12-28 19:30:28
- 日本丰田汽车厂11月全球产量创新高2023-12-28 19:26:02
手机
- 中国11月手机出货量增34% 5G手机出货量2709.2万部2023-12-28 19:27:57
- 荣耀发布新一代旗舰荣耀Magic5系列,新款上市价格分期0首付3999元起2023-03-06 16:12:32
- 美国商务部指违禁,长江存储被美国拜登制裁名单面临停工裁员2023-02-17 18:41:53
- 苹果Apple iOS车载系统CarPlay支持哪些更多汽车品牌2023-02-02 17:33:27
- 香港去哪买三星手机回来吗? 买香港便宜售价手机市场地点和网站2023-02-02 11:03:11
数码
- 华为5G芯片正式亮相:预示华为将发首款5G手机2023-08-31 13:22:33
- 腾讯传计划放弃虚拟现实VR硬件计划2023-02-17 23:32:30
- 三星手机份额大跌!三星手机中国市场份额变化国内仅剩3%2023-02-01 17:06:15
- 三星手机份额大跌在中国没市场了!国内市场占有率仅剩1%国外比苹果销量高2023-02-01 16:59:53
- vivo发布2022 vivoNEX手机极简易浏览器下载:简洁流畅无广告!2022-12-02 17:29:30
科技
- 中兴受美国制裁事件 被罚了20亿美元过程事件始末 中兴被制裁后公司现状2023-11-02 22:12:46
- B站怎么炸崩了哔哩哔哩服务器今日怎么又炸挂了?技术团队公开早先原因2023-03-06 19:05:55
- 苹果iPhoneXS/XR手机电池容量续航最强?答案揭晓2023-02-19 15:09:54
- 华为荣耀两款机型起内讧:荣耀Play官方价格同价同配该如何选?2023-02-17 23:21:27
- google谷歌原生系统Pixel3 XL/4/5/6 pro手机价格:刘海屏设计顶配版曾卖6900元2023-02-17 18:58:09