摘要 - 我们研究了配备有手臂的腿部机器人的移动操作问题,即腿部手机。机器人腿通常用于活动性,但通过进行全身控制提供了一个机会来扩大操纵功能。也就是说,机器人可以同时控制腿部和手臂以扩展其工作区。我们提出了一个可以通过视觉观测来自主进行全身控制的框架。我们的方法,即视觉全身控制(VBC),是由低级政策组成的,使用各个自由度来跟踪人体速度以及最终效应器位置以及基于视觉输入的速度和最终效应器位置的高级政策。我们在模拟中训练两个级别的策略,并执行SIM2REAL转移以进行实际机器人部署。我们进行了广泛的实验,并在以不同的配置(高度,位置,方向)和环境中拾取不同对象时表现出明显的优势。
主要关键词