我的位置:首页 >> 最新文章

openai造出一款机械手臂50小时就能模拟人手一百年的训练量防水材料刻绘机

发布时间:2020-01-18 12:24:16 来源:雄厚机械网

由伊隆 · 马斯克(elon musk)创办的非盈利性人工智能组织 openai,今天向我们展示了一项新的研究成果:让机械手可以像人手一样抓取和操纵物体。虽然这种仿真造型的手掌我们已经见过很多了,但让 “手指” 能够和人类的真手一样灵活可动,对机械结构来说可不是一件简单的事。

但你在下面的动图中也能看到,这套名为 dactyl 的机械手系统能够按照指令要求,轻松完成转动立方体的动作,而且这种包含各种技巧的指尖操作,显然要比过去我们所看到的机器人行走跳跃复杂得多。

dactyl 自所以能够实现这么高效的运作,和 open ai 使用的强化学习算法有关系。就像是刚出生的小孩一样,ai 或是机器人刚造出来后同样什么都不懂,如果你希望它能够完全理解某项复杂任务的流程,肯定需要进行反复的训练。

尤其是对于真实存在的物理机器人来说,研究人员往往要耗费大量的现实时间对其进行指导练习。

但 openai 现在的做法,则是完全在虚拟环境中对 ai 机器人进行训练,然后再把 ai 应用在实体机器人身上。他们还会在训练的过程中增加大量的动态随机事件,让 ai 在这个过程中自己领悟出完成任务的诀窍。

以这次的机械手掌为例,首先,他们会教导机械手臂按照指令,将六面立方体中的正确颜色翻转出来;然后便开始改变周围环境的灯光和噪声,以及立方体的颜色、重量、纹理和摩擦力等;甚至还会改变训练过程中的重力环境因素。

之所以会加入这些随机化的变量,也是为了让 ai 能更好的应对各种意外情况的发生:“比如说不同的重力环境下,dactyl 自己就会去领悟这会对立方体操控造成哪些影响。不然在现实世界中,一旦我们改变手臂的高度,重力环境发生改变,立方体可能就会从手中滑落。”

另外,由于不用模仿人类的行为,所以 openai 的训练方式也可以允许 ai 充分去思考人类没有思考过的方式,说不定还能获得意想不到的成果。

这种虚拟环境的训练模式还有一个好处,那就是不会耗费现实世界的时间。目前 dactyl 已经积累了大约 100 年的训练经验,尝试用无数种方法来控制立方体的转动,但实际上这个过程只相当于我们现实世界中的 50 个小时而已。

在虚拟世界里完成训练后,ai 就可以应用这些经验去分析现实世界里的动态因素,并调整自己的行为来完成任务了。如今 dactyl 已经可以连续完成 50 次的立方体旋转操作,且不会出错。

值得一提的是,这种超高效的训练模式不仅能运用在物理机器人上,也同样可以用于其它的虚拟 ai 模型。在去年 7 月份,openai 开发的 open ai five 也同样在虚拟世界里经历了上万个小时的学习,实际上只是花费了几天的时间,然后它便在 dota2 游戏中击败了职业选手 dendi。

虽然只是一次 solo 对决而非 5v5,但依旧让我们看到了人工智能在电竞这种复杂领域的有效性,包括我们所熟知的 “围棋杀手” alphago,也是 deepmind 公司使用深度强化学习训练出来的 ai 模型。

据说强化学习的灵感最早来源于人类对自然界动物学习过程的长期观察,之所以近几年内才开始尝试,也是受益于神经网络技术的进步,以及 openai 本身的规模优势。一旦强化学习的基准更为多样和复杂,自然也得付出不小的运算成本。

按照 openai 给出的数据,dactyl 的训练设备动用了约 6144 颗 cpu,以及 8 颗来自 nvidia 的 v100 gpu,这种规模的基础硬件只有很少数的研究机构才能够使用。

总得来说,openai 提出的 “将模拟环境的成果应用到现实世界” 会是开发通用机器人的有效解决方案之一,但也有机器人专家认为,这种程度的实验结果只会局限在某一个特定任务上,能否真正解决现实世界的难题,则仍然是一个未知数。

题图来源:openai

中山注册公司经营范围

中山注册公司登记

筹划税务网

内资企业设立流程图

相关阅读
国机集团严格贯彻落实国家对党政建设工作的要求耦合器

2月27日,《中共中央关于加强党的政治建设的意见》全文发布。中央办公厅负责人答记者问时表示,出台这个《意见》,是贯彻习近平新时代中国特色社会主义思想和党的十九大精神的重大举措,是

02月21日 20:22
当AI碰上诗词你当人脑吃素的丝印网纱

我们经常会对人的能力产生一些质疑,就像很多人调侃,人生最辉煌的一断时间是高考前6个月,这时你上知天体运行原理,下知有机无机反应,前有椭圆双曲线,后有杂交生物圈,外可说英语,内可

02月21日 20:05
方圆搅拌站新品亮风采垂直提升式HZS180D投入使用特色食品

方圆集团垂直提升式HZS180D搅拌站落户威海,该设备继承了箱式搅拌站安装快捷、生产效率高、维护保养方便、占地面积小、节能环保等优点。方圆集团垂直提升式HZS180D搅拌站方圆集团垂直提升式HZS

02月21日 20:01
浙江机器换人开辟大农机发展格局脱硫设备

可远程遥控的自走式喷雾剂、一次收获数十个包心菜的收获机、使农具保持水平的拖拉机动态平衡系统……在刚刚结束的2016浙江农业博览会上,以“农业+机械化”为主题的现代农业装备展示区尤为

02月21日 20:00
东营强力永磁棒哪家好乌兰察布

东营强力永磁棒哪家好二是出气通道不能被堵塞,应尽快清除沉积的灰尘、油污和杂物,保证通道畅通。4、冷却油液的换,换油时间为10天,第二次为1个月,以后每三个月换一次油。对于加注润滑脂

02月21日 19:44
重卡挖掘机销量升势不减工程机械配置时点来临精密模具

9月重卡销量突破10万辆,创下新的历史记录,同比狂增89%,环比增长7%,重卡市场已经连续三个月保持着80%以上的同比增幅。而传统上,7/8月份是重卡销售淡季。事实上,不只是重卡销量大增,挖掘

02月21日 19:29
友情链接: