这份技术报告概述了我们在 PRCV 挑战赛中应用的方法，重点关注驾驶场景中的认知和决策。我们采用了 InternVL-2.0（一种开创性的开源多模态模型），并通过改进模型输入和训练方法来增强它 ...
随着多样化驾驶模拟器和大规模驾驶数据集的出现，基于学习的车辆规划越来越受到关注。虽然离线强化学习 (RL) 非常适合这些安全关键型任务，但它仍然很难进行长期规划。在这项工作中，我们提出了一个基于技能的框架，可以增强离线强化学习以克服长期车辆规划挑战 ...
多传感器融合对于准确可靠的自动驾驶系统至关重要。最近的方法基于点级融合：用相机功能增强激光雷达点云。然而，相机到 LiDAR 的投影抛弃了相机特征的语义密度，阻碍了此类方法的有效性，特别是对于面向语义的任务（例如 3D 场景分割） ...
高清地图提供了丰富且精确的驾驶场景静态环境信息，是自动驾驶系统规划的基础和不可或缺的组成部分。在本文中，我们提出了 \textbf{Map} \textbf{TR}ansformer，这是一种用于在线矢量化高清地图构建的端到端框架。我们提出了一种统一的排列等效建模方法，即将图元建模为具有一组等效排列的点集，它准确地描述了图元的形状并稳定了学习过程 ...
本文考虑诊断奖励设计中某些常见错误的问题。它的见解也适用于更广泛的成本函数和绩效指标的设计。为了诊断常见错误，我们开发了 8 个简单的健全性检查来识别奖励函数中的缺陷 ...
模仿学习是一个连续的任务，学习者试图模仿专家的行为以获得最佳表现。最近针对此任务提出了几种算法。在这个项目中，我们的目标是对这些算法进行广泛的审查，展示它们的主要特征，并比较它们的性能和遗憾界限 ...
模仿学习 (IL) 是一种简单而强大的方法，可以使用可大规模收集的高质量人类驾驶数据来产生类似人类的行为。然而，仅基于模仿学习的政策往往无法充分考虑安全性和可靠性问题。在本文中，我们展示了模仿学习与使用简单奖励的强化学习相结合如何能够比仅通过模仿学习的驾驶策略显着提高驾驶策略的安全性和可靠性 ...
为现实的城市导航场景制定稳健的控制策略并不是一项简单的任务。在端到端方法中，这些策略必须将车辆摄像头的高维图像映射到转向和油门等低级操作。虽然纯粹的强化学习（RL）方法完全基于工程奖励，但生成对抗模仿学习（GAIL）代理在与环境交互的同时从专家演示中学习，这有利于 GAIL 执行难以获得奖励信号的任务，例如自动驾驶 ...
我们展示了基于模型的生成对抗性模仿学习（MGAIL）在密集城市自动驾驶任务中的首次大规模应用。我们使用分层模型增强标准 MGAIL，以实现对任意目标路线的泛化，并使用带有模拟交互式代理的闭环评估框架来衡量性能。我们根据在旧金山行驶超过 100,000 英里的真实车辆收集的专家轨迹来训练策略，并展示了一种可操纵的策略，即使在零样本设置中也能稳健地导航，并推广到具有现实世界驾驶中从未出现过的新颖目标的合成场景 ...
规模化赛车的自动驾驶赛车作为开发感知、规划和控制算法以在车辆操控极限下实现安全自动驾驶的有效方法而受到越来越多的关注。为了训练自动驾驶赛车的敏捷控制策略，基于学习的方法主要利用强化学习，尽管结果好坏参半。在这项研究中，我们对赛车的各种模仿学习策略进行了基准测试，这些策略直接应用于模拟和规模化的现实世界环境中或用于引导强化学习 ...