摘要 - 机器人近距离是使用户能够在距离执行任务的关键要求。大多数现有的遥控平台都依赖于2D接口。存在几种VR解决方案,但是在操作移动操作机器人时,没有一个实时的3D环境。我们提出了Ghost,这是一种使用消费者VR硬件来使人能够远程操作移动波士顿动力学现场机器人的幽灵方法。我们使用Unity在虚拟环境中从Spot的摄像机中渲染3D点云,使该人能够将机器人控制为站在其附近的“幽灵”,以及一个虚拟龙门,该虚拟龙门可以使人操纵机器人的最终效应器来执行任务。我们的方法使经验丰富的用户可以对机器人进行静脉操作,从而比最先进的点片基线执行8个灵巧的任务,例如YCB杯堆叠42%。我们还提出了结果,表明新用户非常喜欢VR,而不是平板电脑,并且在使用Ghost的操作任务中成功了两倍。
主要关键词