增强现实系统有助于控制机器人(+视频)

При том, что роботы становятся все более умелыми и автономными, они по-прежнему могут нуждаться в нашей помощи при выполнении задач в условиях реальной среды。 Поэтому робототехники продолжают искать новые способы, позволяющие без длительной подготовки операторам управля робь奥塔米。

来源:Robogeek新闻频道(关于机器人技术的俄罗斯与世界新闻)

虽然机器人变得越来越熟练和自主,但它们可能仍然需要我们的帮助才能在现实环境中执行任务。因此,机器人专家不断寻找新的方法,让操作员无需经过大量培训即可控制机器人。

纽约大学的 Jared Alan Frank 决定利用增强现实 (AR) 的效果来开发一个通过普通智能手机或平板电脑控制机器人的界面。 “该系统使用设备的内置摄像头捕捉场景细节的视频,然后叠加虚拟对象,就像其他 AR 应用程序一样。但在这种情况下,使用触摸屏操作,您可以使机器人移动或收集物体。您不需要此类项目中通常使用的昂贵的专业动画(动作捕捉)设备,”Frank 说。

使用 Apple 的 Xcode 软件,Frank 创建了一个应用程序,可以检测环境中的机器人和物体,并生成带有坐标系的虚拟网格来跟踪屏幕上的这些物体。用户可以操纵屏幕上的物体,并观看机器人在现实世界中执行所需的动作。机器人的命令通过 Wi-Fi 从应用程序发送。当前版本采用Raspberry Pi微型计算机作为机器人的主控制器。

为了感知环境,Frank 在机器人和机器人必须移动的物体上放置了视觉提示。智能手机或平板电脑使用摄像机将场景数字化;应用程序识别标记并使用此信息来跟踪标记的对象。这些所谓的基准点通常用于 AR 应用程序中,将物理环境和对象集成到虚拟环境中。