预测、决策和运动规划对于自动驾驶至关重要。在大多数当代作品中，它们被视为单独的模块或组合成具有共享主干但独立任务头的多任务学习范例。然而，我们认为它们应该被整合到一个综合框架中 ...
预测交通人员的未来运动对于安全高效的自动驾驶至关重要。为此，我们提出了 PredictionNet，这是一种深度神经网络 (DNN)，可以预测所有周围交通代理的运动以及自我车辆的运动。所有预测都是概率性的，并以允许任意数量的代理的简单自上而下的光栅化表示 ...
动态多智能体系统中的行为预测是自动驾驶汽车背景下的一个重要问题，因为组件道路的复杂性表示和交互，包括移动智能体（例如行人和车辆）和道路环境信息（例如道路信息）.. ...
在本报告中，我们介绍了我们在 CVPR 2022 的 Waymo 开放数据集挑战赛中的占用率和流量预测挑战的解决方案，该挑战赛在排行榜上排名第一。我们开发了一种新颖的分层时空网络，具有时空编码器、富含潜在变量的多尺度聚合器和递归分层 3D 解码器。我们使用多种损失，包括焦点损失和修改后的流迹损失来有效地指导训练过程 ...
我们提出了 CornerNet，这是一种新的对象检测方法，我们使用单个卷积神经网络将对象边界框检测为一对关键点（左上角和右下角）。通过将对象检测为成对关键点，我们无需设计现有单级检测器中常用的一组锚框。除了我们新颖的公式之外，我们还引入了角点池化，这是一种新型的池化层，可以帮助网络更好地定位角点 ...
在本文中，我们提出了 HOME，这是一个解决运动预测问题的框架，其图像输出代表智能体未来位置的概率分布。该方法允许采用经典卷积网络的简单架构，并结合代理交互的注意机制，并输出代理可能的未来的无约束 2D 顶视图表示。基于此输出，我们设计了两种方法来对一组有限的代理未来位置进行采样 ...
在本文中，我们提出了一种神经运动规划器（NMP），用于学习在复杂的城市场景中自动驾驶，包括交通灯处理、让行以及与多个道路使用者的交互。为了实现这一目标，我们设计了一个整体模型，以原始 LIDAR 数据和高清地图作为输入，并以 3D 检测及其未来轨迹的形式生成可解释的中间表示，以及定义每个位置的优劣的成本量。自动驾驶汽车可以在规划范围内采取。然后，我们对一组不同的物理上可能的轨迹进行采样，并选择具有最小学习成本的轨迹 ...
基础模型的出现彻底改变了自然语言处理和计算机视觉领域，为其在自动驾驶（AD）中的应用铺平了道路。这项调查对 40 多篇研究论文进行了全面回顾，展示了基础模型在增强 AD 方面的作用。大型语言模型有助于 AD 中的规划和模拟，特别是通过它们在推理、代码生成和翻译方面的熟练程度 ...
我们的目标是通过模仿学习来自动训练驾驶策略，该策略足够强大以驾驶真实车辆。我们发现标准行为克隆处理复杂的驾驶场景，即使我们使用接入系统来输入并使用控制器来进行操作汽车上执行输出：3000万个例子仍然不够。我们建议以专家驾驶干扰的形式让学习者尝试合成数据，这会产生有趣的情况，例如碰撞和/或偏离道路... ...
尽管强化学习 (RL) 方面取得了令人鼓舞的进展，但开发自动驾驶 (AD) 算法仍然具有挑战性：关键问题之一是缺乏能够在现实世界数据上训练和有效验证 RL 策略的开源平台。我们提出了 DriverGym，这是一个与 OpenAI Gym 兼容的开源环境，专门用于开发自动驾驶的 RL 算法。 DriverGym 提供对超过 1000 小时的专家记录数据的访问，还支持反应式和数据驱动的代理行为 ...