我们推出了一款基于 NeRF 的多功能模拟器,用于测试自动驾驶 (AD) 软件系统,其设计重点是传感器真实闭环评估和安全关键场景的创建。该模拟器从现实世界的驾驶传感器数据序列中学习,并能够重新配置和渲染新的、未见过的场景。在这项工作中,我们使用模拟器来测试 AD 模型对受欧洲新车评估计划 (Euro NCAP) 启发的安全关键场景的响应 ...
操作域之间的分布变化可能会严重影响自动驾驶车辆(SDV)中学习模型的性能。虽然这是一个公认的问题,但之前的工作大多探索了简单的解决方案,例如微调,重点关注运动预测任务。在这项工作中,我们探索了由预测、规划和控制组成的可微自治堆栈的新颖适应策略,在闭环中进行评估,并研究了经常被忽视的灾难性遗忘问题 ...
自动驾驶需要能够推理交通代理之间未来的交互,并为规划做出明智的评估。本文介绍了 \textit{Gen-Drive} 框架,该框架从传统的预测和确定性规划框架转变为生成然后评估规划范式。该框架采用行为扩散模型作为场景生成器,产生多种可能的未来场景,从而增强联合交互推理的能力 ...
自动驾驶系统旨在通过交互代理之间的行为集成来实现安全和社会一致的驾驶。然而,由于多智能体场景的不确定性和异构交互,挑战仍然存在。当前的密集和稀疏行为表示在多智能体建模中遇到低效率和不一致的问题,导致集成预测和规划(IPP)时集体行为模式的不稳定 ...
评估自动驾驶车辆规划算法的性能需要模拟长尾安全关键的交通场景。然而,传统的场景生成方法往往在可控性和真实性方面存在不足;他们还忽略了代理交互的动态。为了解决这些限制,我们引入了 SAFE-SIM,一种新型的基于扩散的可控闭环安全关键仿真框架 ...
自回归世界模型在矢量化场景理解中表现出强大的泛化能力,但由于不确定性建模不足和自我欺骗而在推导动作时遇到困难。在本文中,我们通过制定多个概率假设来应对这些挑战,从而探索从自回归世界模型中得出决策的可行性。我们提出 LatentDriver,一个框架将环境的下一个状态和自我车辆的可能动作建模为混合分布,然后从中导出确定性控制信号 ...
扩散模型在自动驾驶中的联合轨迹预测和可控生成方面很有前景,但它们面临着推理步骤低效和计算需求高的挑战。为了应对这些挑战,我们引入了最佳高斯扩散 (OGD) 和估计清洁流形 (ECM) 指导。 OGD 针对较小的扩散时间 $T$ 优化先验分布,并从中开始反向扩散过程 ...
扩散模型利用随机过程有效地捕获复杂的数据分布,已经显示出其作为生成模型的性能,通过迭代去噪过程在图像相关任务中取得了显着的成功。最近,扩散模型得到了进一步的应用,并显示出其强大的规划任务能力,导致2023年以来相关出版物的显着增长。为了帮助研究人员更好地了解该领域并推动该领域的发展,我们对以下领域进行了系统的文献综述:规划扩散模型应用的最新进展 ...
希望预测以自动驾驶车辆的不同规划轨迹为条件的交通参与者的行为。这使得下游规划者能够估计其决策的影响。最近的条件行为预测方法依赖于回归解码器,这意味着坐标或多项式系数被回归 ...
在预测未来轨迹等行为时,对人类互动的有效建模至关重要。每个人都会通过自己的动作影响周围的代理人,因为每个人都遵守社会非成文规则,例如避免碰撞或群体跟随。在本文中,我们通过从算法的角度看待问题,对这种随着时间不断演变的交互进行建模 ...