随着 nuPlan 和 Argoverse 等开源数据集的发布,围绕基于学习的规划器的研究在过去几年中得到了广泛传播。现有系统在模仿人类驾驶员行为方面表现出了出色的能力,但它们难以保证安全的闭环驾驶。相反,基于优化的规划器在短期规划场景中提供了更大的安全性 ...
没有人可以在真空中驾驶汽车;她/他必须与其他道路使用者协商以实现他们在社交交通场景中的目标。理性的人类驾驶员可以通过隐式通信以社交兼容的方式与其他道路使用者进行交互,从而在交互密集、安全关键的环境中顺利完成驾驶任务。本文旨在回顾现有的方法和理论,以帮助理解和重新思考人类驾驶员与社会自动驾驶之间的相互作用 ...
由于多模式交互的复杂性,在密集和动态的环境中导航对自动驾驶系统提出了重大挑战,其中各种交通参与者和自动驾驶车辆的行为是复杂且隐式耦合的。在本文中,我们提出了一种新颖的框架,即多模态综合预测和决策(MIND),它通过有效生成涵盖多种独特交互模态的联合预测和决策来应对挑战。具体来说,MIND 利用基于学习的场景预测来获得具有社会一致性交互模态的集成预测和决策,并利用模态感知动态分支机制来生成场景树,该树可以有效地捕获独特交互模态的演变,并且交互不确定性变化较小。规划范围 ...
轨迹预测在自动驾驶堆栈中发挥着至关重要的作用,它使自动驾驶车辆能够预测周围智能体的运动。近年来,基于目标的预测模型因解决未来轨迹的多模态性质而受到关注。基于目标的预测模型通过首先预测智能体的 2D 目标位置,然后预测基于每个目标的轨迹来简化多模态预测 ...
在快速发展的自动驾驶领域,准确预测未来事件并评估其影响的能力对于安全性和效率至关重要,对决策过程有重要帮助。世界模型已经成为一种变革性方法,使自动驾驶系统能够合成和解释了大量传感器数据,从而预测未来潜在的场景并弥补信息差距。本文对自动驾驶世界模型的现状和未来进展进行了初步概述,深入其理论基础、实际应用以及旨在克服现有局限性的持续性研究工作... ...
Waymo打开数据集和nuscenes等大规模驾驶数据集极大地加速了自动驾驶研究,3d检测和轨迹预测等感知任务。由于这些数据集中的驾驶日志包含高清地图和详细的对象注释,可以准确反映现实世界交通行为的复杂性,因此我们可以收获大量复杂的交通场景并在模拟中重新创建其数字孪生。与现有模拟器中经常使用的手工制作场景相比 ...
运动规划是一个计算问题,通常基于周围智能体的预测、环境理解以及历史和未来背景来找到一系列有效的方法。它也可以被视为一种博弈,其中智能体根据其他智能体的意图和遇到的环境不断计划下一步行动,通过增量行动进一步考虑实现其最终目标。为了对动态规划和交互过程进行建模,我们提出了一个新颖的框架DeepEMplanner,将逐步交互推向细粒度的行为学习... ...
尽管实时规划器在自动驾驶方面表现出了卓越的性能,llm)的不断探索为增强运动规划的可解释性和可控性开辟了途径。然而,llm的规划者仍然面临重大挑战,包括资源消耗增加和推理时间延长,这对实际部署构成了巨大障碍。鉴于这些挑战,我们引入了异,这是一种新的异步,llm增强型闭环框架场景相关指令特征来指导实时规划器进行精确且可控的轨迹预测... ...
基于深度学习的模型在自动驾驶领域得到了广泛的应用,尤其是端到端的解决方案越来越受到关注。然而,这些模型的黑盒特性引发了人们对其自动驾驶可信度和安全性的担忧,如何调试因果关系已成为迫切需要解决的问题。尽管现有一些关于自动驾驶可解释性的研究,但目前还没有系统的解决方案来帮助研究人员调试和识别导致端到端自动驾驶最终预测动作的关键因素 ...
运动规划是一项具有挑战性的任务,需要在高度动态和复杂的环境中生成安全可行的轨迹,从而形成自动驾驶车辆的核心能力。在本文中,我们提出了 DRAMA,这是第一个基于 Mamba 的自动驾驶汽车端到端运动规划器。 DRAMA融合了特征空间中的摄像头、激光雷达鸟瞰图像以及自我状态信息,生成一系列未来的自我轨迹 ...