详细内容或原文请订阅后点击阅览
一种让机器人通过倾听学习的方法将使它们更有用
如今，大多数人工智能机器人都使用摄像头来了解周围环境并学习新任务，但使用声音训练机器人也变得越来越容易，帮助它们适应能见度有限的任务和环境。虽然视觉很重要，但有些日常任务中声音实际上更有帮助，比如听洋葱在……
来源:MIT Technology Review _人工智能斯坦福大学机器人与具身人工智能实验室的研究人员着手改变这一现状。他们首先构建了一个音频数据收集系统，该系统由一台 GoPro 相机和一个带有麦克风的夹持器组成，麦克风旨在过滤背景噪音。人类演示者使用夹持器完成各种家务，然后使用这些数据教机械臂如何自行执行任务。该团队的新训练算法可帮助机器人从音频信号中收集线索，从而提高工作效率。
“到目前为止，机器人一直在静音视频上进行训练，”斯坦福大学博士生、这项研究的主要作者 Zeyi Liu 说道。“但音频中有很多有用的数据。”
研究为了测试机器人在具备“倾听”能力的情况下能取得多大的成功，研究人员选择了四项任务：在平底锅中翻转百吉饼、擦除白板、将两条 Velcro 胶带粘在一起以及从杯子中倒出骰子。在每项任务中，声音都能提供摄像头或触觉传感器难以理解的线索，例如判断橡皮擦是否正确接触白板，或者杯子里是否装有骰子。
在对每项任务进行了几百次演示后，该团队比较了使用音频进行训练和仅使用视觉进行训练的成功率。该研究结果发表在 arXiv 上的一篇未经同行评审的论文中，令人鼓舞。在骰子测试中，仅使用视觉时，机器人可以判断杯子里是否有骰子的概率为 27%，但加入声音后，这一概率上升到 94%。
arXiv开展这项研究的实验室负责人 Shuran Song 表示，这并不是第一次使用音频来训练机器人，但这是朝着大规模使用音频迈出的一大步：“我们正在让使用‘在野外’收集的音频变得更容易，而不是局限于在实验室中收集，这更耗时。”
训练机器人 拓展