CMU科学家们带一群机器人开房,并收集了28,000种不同的姿势

简介: 来自卡耐基梅隆大学 (CMU) 的四个科学家,在一篇论文里说,他们带着一群机器人去住Airbnb了。

来自卡耐基梅隆大学 (CMU) 的四个科学家,在一篇论文里说,他们带着一群机器人去住Airbnb了。

也不知道,近来忙于应付纽约市政府的Airbnb,能不能感受到这一缕清风。

回归正片,研究人员自然不是请机器人去度假。

他们觉得,机器人常年待在实验室里,生活场景很单调,和现实也有差距。


image

这样的话,训练出来的技能,很难推广到真实世界里去。

只能在实验室做任务的机器人,也不是CMU的人类们想要的。

“经济适用”机

团队决定,让机器人参与更多的实战,培养它们泛化能力。

image

于是,人们先造了一批“便宜”的机器人,就是把Dobot Magician机械臂改造了一下——

加上了双轴手腕,两指电动夹具,还有移动底座。

传感器方面,配置了英特尔R200 RGB摄像头,以及帮摄像头转脖子的云台。


image

至于机器人的大脑,笔记本而已,CPU是i5-8250U,RAM有8G。

研究人员说,每台“只要”三千美元,比别的 (两万美元的) 机器人经济多了。

“经济适用”房

然后,带机器人去开房。

image



△ 仔细选择的不同环境

研究人员先在Airbnb上,开了六套房,是收集真实数据用的。

就像刚才说的,只用实验室环境里的数据来训练,就不是真正的训练。

他们用Yolo模型做物体检测,然后用“Robust-Grasp (鲁棒抓取) ”神经网络结构 (详见下文) ,来算出最佳的抓取姿势。



就这样,一共收集了28,000种不同的姿势。

自制的数据集,取名为Home-LCA,后面三个字母,指的是“便宜的机械臂”。

机智的决策

刚才,简要登场的“Robust-Grasp”神经网络,就是机器人做出机智抓取决策的关键。

image

结构分成三部分——

一是抓取预测网络 (GPN) ,这里用的是训练好的ResNet-18。吃进像素图 (Pixel Imagery) ,再决定用什么姿势抓取。

不过,用了便宜的机器人,收集的数据会有很多噪音,所以……

二是噪音建模网络 (NMN) ,根据场景图像和机器人获取的信息这两组数据,把噪音分离出去。

三是边缘化层 (Marginalization Layer) ,把两股数据流结合起来,以便给出更好的决策。



团队用自制的Home-LCA数据集,训练了这个网络,也用两个实验室数据集做陪练,看哪边效果好。

实战派vs温室派

训练完成之后,研究人员又在Airbnb上面,另外开了3套房,作为赛场。

所以说,赛前谁都没有到过这些地方。



image


△ 不知文中为何只有两间测试房的照片


真正的抓取比赛开始了,参赛双方分别是:

实战派,用Home-LCA训练的AI。

温室派,用Lab-Baxter训练的AI。

image

△ 三个新房子

同在陌生的环境里,抓取陌生的物体,实战派机器人的成功率远远超过温室派。

这并不意外,毕竟在那之前,选手们还进行了另外一项比赛——

机器人做随性抓取,AI来预测能不能抓取成功 (依靠位置和角度) 。

image



△ 横向对比,当训练集与测试集来源不同,便知其泛化能力

结果,用Home-LCA数据集训练的模型,在接受其他两个数据集的测试时,预测正确率并没有明显差异,一直保持在70%上下 (见第3、5行) 。

而用Lab-Baxter和Lab-LCA数据集训练的模型,换其他数据集测试,预测正确率便会从70%左右,下降至55%左右 (见第1、2、4行) 。

image

△ 占卜婆婆

也就是说,实战派处变不惊,泛化能力稳胜一筹。

野生,野长

果然,从模型训练开始,就不能对机器人太温柔。

不管是在模拟器里修炼的机器人,还是用实验室数据喂养的机器人,都容易对外界的艰险适应不能。

image

△ 到外面去吧

采集真实世界的数据,来训练机器人的实际操作技能,它们便不会被困在实验室里,寸步难行。

大概,这就是CMU在机器人能力的泛化上,为同仁们提供的一个思路吧。

论文传送门:

https://arxiv.org/pdf/1807.07049.pdf

原文发布时间为:2018-07-28
本文来自云栖社区合作伙伴“量子位”,了解相关信息可以关注“量子位”。

相关文章
|
机器学习/深度学习 人工智能 算法
将有色液体图像转换成透明液体,CMU教机器人准确掌控向杯中倒多少水
将有色液体图像转换成透明液体,CMU教机器人准确掌控向杯中倒多少水
114 0
|
机器学习/深度学习 算法 机器人
CMU发表新型灵巧机器人算法,准确学习日常家具的操纵方法
CMU发表新型灵巧机器人算法,准确学习日常家具的操纵方法
127 0
|
传感器 人工智能 机器人
科学家正在开发带有电子毛发的机器人,可模仿人类皮肤触感,甚至感知预测触摸方向
科学家正在开发带有电子毛发的机器人,可模仿人类皮肤触感,甚至感知预测触摸方向
202 0
科学家正在开发带有电子毛发的机器人,可模仿人类皮肤触感,甚至感知预测触摸方向
|
机器学习/深度学习 传感器 人工智能
科学家打造出能让机器人拥有近乎人类触感的人工指尖
来自伦敦大学学院的触摸研究员Mandayam Srinivasan表示,研究人员正在“让自然和人工触摸领域更加接近。
科学家打造出能让机器人拥有近乎人类触感的人工指尖
|
机器人
CMU计算机教授造出海上飞蛇:蛇状机器人为军舰保驾护航
卡内基梅隆大学(CMU)备受关注的蛇状机器人现在可以在水下滑行,人们以此用来检查船舶,潜艇和基础设施是否损坏等。
225 0
CMU计算机教授造出海上飞蛇:蛇状机器人为军舰保驾护航
|
机器人 定位技术
构建一个宇宙 3D 地图需要什么?科学家说:5000 个机器人就行
我们接下来要说的可不是什么暑期大片,而是真实存在的:美国能源部劳伦斯伯克利国家实验室真的设计出了一个天文系统,他们打算用这个需要用到 5000 个机器人的系统来找出新星系,并由此构建一个大型的宇宙 3D 地图。
191 0
构建一个宇宙 3D 地图需要什么?科学家说:5000 个机器人就行
|
传感器 前端开发 机器人
科学家用3D打印技术制造蚂蚁机器人,可求助同伴相互连接,未来或将用于太空探索
科学家用3D打印技术制造蚂蚁机器人,可求助同伴相互连接,未来或将用于太空探索
220 0
科学家用3D打印技术制造蚂蚁机器人,可求助同伴相互连接,未来或将用于太空探索
|
机器学习/深度学习 人工智能 自然语言处理
|
10天前
|
自然语言处理 算法 机器人
智能电话销售机器人源码搭建部署系统电话机器人源码
智能电话销售机器人源码搭建部署系统电话机器人源码
20 4
|
20天前
|
机器学习/深度学习 传感器 算法
智能机器人在工业自动化中的应用与前景###
本文探讨了智能机器人在工业自动化领域的最新应用,包括其在制造业中的集成、操作灵活性和成本效益等方面的优势。通过分析当前技术趋势和案例研究,预测了智能机器人未来的发展方向及其对工业生产模式的潜在影响。 ###
79 9