安全测试是自动驾驶系统(ADSS)开发的基本支柱。为了确保ADS的安全性,生成各种安全性的测试方案至关重要。现有广告从业人员主要集中于在模拟环境中重现现实世界中的交通事故以创建测试场景,但必须强调,由于人类驾驶和自主驾驶之间的差异,这些事故中的许多事故并未直接导致对ADS的安全违规。更重要的是,我们观察到,某些无事故现实世界的情况不仅可以导致广告中的不良行为,而且还可以在模拟测试期间利用违反广告的行为。因此,从常规交通情况(即无碰撞场景)中发现安全侵犯ADS的行为至关重要,以确保自动驾驶汽车(AVS)的安全性。我们介绍了Leade,这是一种实现上述目标的新方法。它会自动从交易视频中生成抽象和具体的方案。然后,它优化了这些场景,以在人类驾驶安全工作的语义一致方案中搜索对广告的安全侵犯。具体来说,Leade增强了大型多模型(LMM)的能力,可以通过流量视频准确构建抽象场景,并通过多模式的几种思想链(COT)生成具体场景。我们在Apollo的工业级4级广告上实施并评估Leade。基于它们,Leade评估并增加了自我车辆(即,与正在测试的ADS连接的车辆)和在语义同等场景中进行人类驾驶之间的行为差异(这里等效语义意味着测试场景中的每个参与者都具有与原始实际交通情况中相同的抽象行为)。实验结果表明,与最先进的广告场景生成方法相比,Leade可以准确地从交通视频中生成测试场景,并有效地发现了具有相同无事故交通情况语义语义的测试场景中更多类型的安全违反Apollo的行为。
随着 2D 传播模型的成功,2D AIGC 内容已经改变了我们的生活。最近,这一成功已扩展到 3D AIGC,其中最先进的方法可以从单个图像或文本生成带纹理的 3D 模型。但是,我们认为当前的 3D AIGC 方法仍然没有完全释放人类的创造力。我们经常想象由多模态输入制成的 3D 内容,例如如果我的宠物兔子在桌子上吃甜甜圈会是什么样子。在本文中,我们探索一种新颖的 3D AIGC 方法:从 IDEA 生成 3D 内容。IDEA 是由文本、图像和 3D 模型组成的多模态输入。据我们所知,这种具有挑战性和令人兴奋的 3D AIGC 设置以前尚未被研究过。我们提出了新的框架 Idea23D,它结合了基于大型多模态模型 (LMM) 和现有算法工具的三个代理。这三个基于 LMM 的代理负责提示生成、模型选择和反馈反射。它们在完全自动化的循环中相互协作和批评,无需人工干预。然后,该框架生成一个文本提示,以创建与输入 IDEA 紧密一致的 3D 模型。我们展示了令人印象深刻的 3D AIGC 结果,超越了以前的方法。为了全面评估 Idea23D 的 3D AIGC 功能,我们引入了 Eval3DAIGC-198 数据集,其中包含 198 个用于 3D 生成任务的多模态输入。该数据集评估生成的 3D 内容与输入 IDEA 之间的一致性。我们的用户研究和定量结果表明,Idea23D 显著提高了 3D 生成的成功率和准确性,并且在各种 LMM、文本转图像和图像转 3D 模型中具有出色的兼容性。代码和数据集可在 https://idea23d.github.io/ 获得。
1.4 法规和条例 B. 遵守所有当前通过的适用于本工作的法规、条例、法律和规章。对因疏忽或违反此方面的任何后果负全部责任,并免除 LMSSC 对由此造成的任何损害的责任。规范或图纸中的任何内容不得解释为允许不完全符合任何国家、州或地方法规或条例的工作。 1.5 参考文献 A. 当规范中引用由技术协会、机构、协会和政府机构(如 ASTM、ANSI 和 FS)发布的参考标准和规范时,适用的版本(下文第 1 和第 2 款所列的版本除外)应为收到投标前 30 天、要求投标时或协议生效日(如果没有投标)的最新发布日期。 1. 发布日期遵循标准。 2. 发布日期列在管理建筑规范和条例中。 B. 任何引用的标准或规范的任何规定(无论是否通过引用明确纳入合同文件)均不得改变 LMSSC、承包商或其任何顾问、代理人或员工在合同文件中规定的职责和责任。C. 除非合同文件另有说明:1. 如果引用的文件与合同文件之间存在冲突,或引用的文件之间存在冲突,则 o