自动驾驶需要准确、快速的 3D 感知系统，包括 3D 对象检测、跟踪和分割。尽管最近基于低成本相机的方法已经显示出有希望的结果，但它们容易受到照明不良或恶劣天气条件的影响，并且具有较大的定位误差。因此，将摄像头与低成本雷达相融合，提供精确的远程测量并在所有环境下可靠运行，是有前途的，但尚未得到彻底研究 ...
准确而强大的 3D 物体检测是自动驾驶车辆和机器人技术的关键组成部分。虽然最近的雷达相机融合方法通过融合鸟瞰图 (BEV) 表示中的信息取得了重大进展，但它们往往难以有效捕获动态物体的运动，导致在现实场景中的性能有限。在本文中，我们介绍了 CRT-Fusion，这是一种新颖的框架，它将时间信息集成到雷达相机融合中以应对这一挑战 ...
随着自动驾驶技术的快速进步，人们对车辆运行过程中自动环境感知的安全性和效率的需求日益增长。在现代车辆设置中，摄像头和毫米波雷达（雷达）作为使用最广泛的传感器，表现出互补的特性，本质上使它们有利于融合并促进实现稳健的性能和成本效益。本文重点对基于深度学习方法的雷达视觉（RV）融合进行全面调查，用于自动驾驶中的 3D 物体检测 ...
多模态融合对于在复杂环境中实现可靠的目标检测和跟踪至关重要。利用异构模态信息的协同作用使感知系统能够实现更全面、鲁棒和准确的性能。作为无线视觉协作的核心问题，雷达相机融合因其广泛的适用性、互补性和兼容性而引发了前瞻性的研究方向 ...
毫米波雷达因其全天候、全光照条件的感知能力，在自动驾驶的3D物体检测中发挥着至关重要的作用。然而，雷达点云存在明显的稀疏性和不可避免的角度估计误差。为了解决这些限制，结合相机可能会部分帮助缓解这些缺点 ...
由于细粒度的几何感知和一般物体识别能力，占用预测在自动驾驶（AD）中发挥着关键作用。然而，现有方法往往会产生较高的计算成本，这与AD的实时需求相矛盾。为此，我们首先评估大多数公共可用方法的速度和内存使用情况，旨在将焦点从仅优先考虑准确性转向同时考虑效率 ...
在雷达相机 3D 物体检测中，雷达点云稀疏且嘈杂，这导致相机和雷达模式融合困难。为了解决这个问题，我们引入了一种新颖的基于查询的检测方法，称为雷达相机 Transformer （RCTrans）。具体来说，我们首先设计一个雷达密集编码器来丰富稀疏的有效雷达标记，然后将它们与图像标记连接起来 ...
近年来，用于自动驾驶的低成本、以视觉为中心的 3D 感知系统取得了重大进展，缩小了与昂贵的基于激光雷达的方法的差距。成为完全可靠的替代方案的主要挑战在于强大的深度预测能力，因为基于摄像头的系统难以应对长检测范围以及不利的照明和天气条件。在这项工作中，我们介绍了 HyDRa，这是一种新颖的相机雷达融合架构，适用于各种 3D 感知任务 ...