基础模型最近在NLP [1、21、8]和CV [7]等不同领域取得了巨大成功。在机器人技术领域,机器人基础模型(RFMS)[9]可以帮助机器人做出更好的决策,从高级任务计划到低级行动控制,为学习真正的通才机器人提供了有希望的方法。在本文中,我们专注于一种特定类型的RFM,该RFM基于图像观察和语言指令直接输出动作命令,在先前的工作中,这也称为视觉语言行动(VLA)模型[4、5、18、24、14]。通过对从不同场景和不同机器人收集的大规模现实世界机器人数据进行培训,这些RFM的性能和概括性更高,比在任务狭窄分布的传统机器人控制器上取得了更好的概括。
数据驱动的机器人技术在过去十年中一直是非常有效的范式。今天,我们可以自主执行灵巧的任务,例如折叠布,在避免碰撞的同时导航走廊,并控制复杂的动态系统,例如使用板载观测的四足动物机器人在挑战性的地形上行走。但它们经常构成基本的限制,以阻止它们在开放世界环境中部署,要么是因为他们对环境的结构做出了强烈的假设,需要大量的机器人数据收集,或者无法说明对周围环境的语义理解。由于这些局限性,数据驱动的机器人技术方法仍然仅限于简单的限制设置,而大多数从业者和潜在的应用程序都无法访问。在特定环境中,他们仍然需要为每个单独的机器人进行手工设计,以解决特定的任务。本论文提出了对未来智能机器人的替代愿景,在那里我们可以拥有一般的机器学习模型,可以控制任何机器人,以便在挑战性的开放世界环境中执行合理的行为。受到语言和视觉基础模型的启发,我们从大量数据中提出了培训机器人基础模型(RFM)的食谱,这些数据仅依靠以Egipentric的视力来控制各种不同的移动机器人。这使机器人系统能够利用互联网基础模型的实力,同时也以现实世界的负担并在现实世界中采取行动。我们还展示了这样的RFM如何用作构建功能强大的机器人系统的骨干,从而可以探索茂密的森林,或在其环境中与人类互动,或者利用卫星图像或自然语言等侧面信息来源。最后,我们提出了一种结合RFM,他们对物理世界的知识,语言和愿景的互联网基础模型,以及使用新颖的计划框架,将RFMS及其对物理世界的知识以及其图像水平的语义理解和基于文本的推理结合在一起。我们希望这是迈向这种通用机器人系统的一步,可以在广泛的机器人上部署,利用预先训练的模型来利用互联网规模的知识,并为多样化的移动机器人应用提供基础。
步骤 3.2:接下来,您需要选择所需的计划审查或许可类型。对于任何建筑、火灾报警、太阳能光伏或高堆存储审查,或临时/“仅检查”交易(至少 2 小时),请选择“LADBS 计划检查(施工)”。对于以前称为“第 5 部分”的系统和设备的任何消防许可证,包括 BDA/DAS/ERRCS 计划,请选择“消防许可证”。对于任何消防栓和通道单元计划审查,请选择“消防栓和通道”。您的选择一旦做出,即为固定,LAFD 计划检查工作人员无法编辑。如果您不确定需要哪个选项,将鼠标悬停在可用选项上将显示每个选项下可用的许可证和计划检查类型的菜单。请注意,您将无法通过此系统提交任何建筑或消防法规条例修改请求(“RFM”或“Mods”)。有关 Mods 的更多信息,请参阅本文档末尾的说明。