详细内容或原文请订阅后点击阅览
NVIDIA 为 ROS 开发者生态系统带来生成式 AI 工具、模拟和感知工作流程
在丹麦最古老的城市之一和自动化中心奥登斯举行的 ROSCon 上,NVIDIA 及其机器人生态系统合作伙伴宣布了面向机器人操作系统 (ROS) 开发人员的生成式 AI 工具、模拟和感知工作流程。其中包括为 ROS 开发人员部署到 NVIDIA Jetson 平台进行边缘计算的全新生成式 AI 节点和工作流程阅读文章
来源:NVIDIA 博客 _机器人技术在丹麦最古老的城市之一的Roscon,Nvidia及其机器人生态系统合作伙伴宣布了生成的AI工具,模拟和知觉工作流程(ROS)开发人员。 在揭示中是新的生成AI节点和工作流程,用于将ROS开发人员部署到Edge AI和机器人技术的NVIDIA JETSON平台。生成的AI使机器人能够感知和理解周围环境的环境,与人类自然沟通,并自主做出自适应决定。 Nvidia Jetson平台 生成ai 生成的AI来到ROS社区 remembr建立在ROS 2上,使用生成AI来增强机器人的推理和作用。它结合了大型语言模型(LLM),视觉语言模型(VLM)和检索效果的生成,以允许机器人构建和查询长期的语义记忆,并提高其导航和与环境互动的能力。 remembr 大语言模型 检索型发电 语音识别能力由Whispertrt ROS 2节点提供动力。该节点使用nvidia tensorrt来优化Openai的耳语模型,以使NVIDIA JETSON的低延迟推断,从而导致响应迅速的人类机器人相互作用。 hispertrt ros 2节点 nvidia tensorrt Openai的耳语模型 带有语音控制项目的ROS 2机器人使用NVIDIA RIVA ASR-TTS服务来使机器人理解并响应口语命令。 NASA喷气推进实验室独立证明了Rosa,Rosa是ROS的AI驱动的代理,在其星云机器人的机器人和Nvidia Nova Carter机器人的NVIDIA ISAAC SIM上运行。 ROS 2带语音控制的机器人 nvidia riva Rosa 星云斑点机器人 Nvidia Nova Carter nvidia isaac sim 在Roscon,Canonical正在演示NanooWl,这是在NVIDIA JETSON ORIN NANO SYSTEM-MODULE上运行的零弹射对象检测模型。它允许机器人实时识别广泛的对象,而无需依赖预定义的类别。 规范 nanoowl 仿真
在丹麦最古老的城市之一的Roscon,Nvidia及其机器人生态系统合作伙伴宣布了生成的AI工具,模拟和知觉工作流程(ROS)开发人员。
在揭示中是新的生成AI节点和工作流程,用于将ROS开发人员部署到Edge AI和机器人技术的NVIDIA JETSON平台。生成的AI使机器人能够感知和理解周围环境的环境,与人类自然沟通,并自主做出自适应决定。 Nvidia Jetson平台生成ai
生成的AI来到ROS社区
remembr建立在ROS 2上,使用生成AI来增强机器人的推理和作用。它结合了大型语言模型(LLM),视觉语言模型(VLM)和检索效果的生成,以允许机器人构建和查询长期的语义记忆,并提高其导航和与环境互动的能力。 remembr 大语言模型检索型发电
语音识别能力由Whispertrt ROS 2节点提供动力。该节点使用nvidia tensorrt来优化Openai的耳语模型,以使NVIDIA JETSON的低延迟推断,从而导致响应迅速的人类机器人相互作用。 hispertrt ros 2节点 nvidia tensorrtOpenai的耳语模型
带有语音控制项目的ROS 2机器人使用NVIDIA RIVA ASR-TTS服务来使机器人理解并响应口语命令。 NASA喷气推进实验室独立证明了Rosa,Rosa是ROS的AI驱动的代理,在其星云机器人的机器人和Nvidia Nova Carter机器人的NVIDIA ISAAC SIM上运行。 ROS 2带语音控制的机器人 nvidia riva Rosa 星云斑点机器人 Nvidia Nova Carter nvidia isaac sim 在Roscon,Canonical正在演示NanooWl,这是在NVIDIA JETSON ORIN NANO SYSTEM-MODULE上运行的零弹射对象检测模型。它允许机器人实时识别广泛的对象,而无需依赖预定义的类别。 规范 nanoowl 仿真 Rosa 星云斑点机器人Nvidia Nova Carter
nvidia isaac sim 在Roscon,Canonical正在演示NanooWl,这是在NVIDIA JETSON ORIN NANO SYSTEM-MODULE上运行的零弹射对象检测模型。它允许机器人实时识别广泛的对象,而无需依赖预定义的类别。 规范nanoowl仿真