研究人员发现听觉可以提高机器人感知

如今的机器人主要依靠视觉和触觉来操作环境，但卡内基梅隆大学（CMU）的新研究可能会改变这一现状。研究人员发现，机器人感知可以通过听觉来提高。

这项研究是首次大规模研究声音与机器人动作之间的交互，根据CMU机器人研究所的研究人员说。该团队发现，声音可以在帮助机器人区分物体方面发挥作用。通过使用听觉，机器人还可以确定是什么类型的动作引起了声音，声音可以帮助预测新物体的物理属性。

勒雷尔·平托（Lerrel Pinto）是卡内基梅隆大学机器人学的博士，将于今年秋天加入纽约大学的教师队伍。

“其他领域的许多初步工作表明，声音可以很有用，但不清楚它在机器人领域会有多大用处，”平托说。

平托和研究人员团队发现，性能率相当高，特别是机器人使用声音成功分类物体的准确率为76％。

由于结果符合团队的期望，他们现在将探索其他选项，例如为机器人配备仪表化手杖。这将使他们能够通过敲击物体来识别它们。

该团队的发现于7月在虚拟机器人科学与系统会议上发表。团队还包括机器人学副教授阿布希纳夫·古普塔（Abhinav Gupta）和Facebook人工智能研究匹兹堡实验室的研究科学家迪拉杰·甘地（Dhiraj Gandhi）。

https://www.youtube.com/watch?v=z38-WCZ7Rb8&feature=emb_title

研究与数据集

研究人员创建了一个大型数据集，并同时记录了60个常见物体的视频和音频。其中一些物体是玩具积木、手工具、苹果、鞋子和网球。记录是在物体在托盘上滚动和碰撞时进行的。

数据集在编目了大约15,000次交互后发布。

倾斜机器人

交互由称为倾斜机器人的方形托盘连接到索耶机器人臂来捕获。索耶也用于在表面上推动物体，收集其他类型的数据。

研究声音如何影响智能机器人的问题已经存在一段时间，但新鲜事是这个大型数据集。

一个新的发现是，机器人可以使用它对某一组物体声音的经验和学习来预测另一组未见物体的物理属性。

“我认为真正令人兴奋的是，当它失败时，它会以我们预期的方式失败，”平托说。例如，机器人不能使用声音来区分红色积木和绿色积木。“但如果是不同物体，例如积木与杯子，它可以弄清楚。”

研究得到了国防高级研究计划局和海军研究办公室的支持。