详细内容或原文请订阅后点击阅览
NVIDIA 开放 Alpamayo 2 Super 商用
NVIDIA 刚刚免费提供了最强大的自动驾驶 AI，供任何人使用。 Alpamayo 2 Super 将多模态感知、推理、轨迹规划和动作生成结合在一个模型中，同时还生成可用于训练和评估其他自动驾驶系统的数据。
来源:QudataNVIDIA 开放 Alpamayo 2 Super 商用
NVIDIA 已将其最新的自动驾驶开放 AI 模型 Alpamayo 2 Super 投入商业使用。该模型拥有 340 亿个参数，旨在帮助开发人员通过将视觉感知、推理和驾驶动作结合在一个系统中来构建 4 级自动驾驶汽车和机器人出租车。
与主要检测物体并预测其运动的传统自动驾驶系统不同，Alpamayo 2 Super 旨在推理复杂的情况并解释其做出的决策。从架构上来说，它结合了两个组件：一个名为 Cosmos 3 Super Reasoner 的 320 亿参数视觉语言模型，用于解释场景；以及一个较小的、大约 20 亿参数的“动作专家”，用于将理解转化为实际的驾驶路径。它可以处理多达七个摄像头的 360 度视图，并确定车辆应如何应对变道、并道和困难十字路口等情况。
对于每种驾驶情况，模型会生成多个链接的输出：
这使得该模型不仅可用于控制自动驾驶车辆，还可用于开发和评估其他驾驶系统。例如，开发人员可以使用 Alpamayo 2 Super 分析现实世界的驾驶数据、生成标签并为设计用于直接在车辆内运行的小型模型创建培训材料。 NVIDIA 表示，该模型还可以帮助减少注释自动驾驶数据所需的时间，有可能将需要数月时间的过程缩短为数天时间。