驾驶世界模型(DWM)重点是预测驾驶过程中场景的演变,它已成为追求自动驾驶的有希望的范式。这些方法使自主驾驶系统可以更好地感知,理解和与动态驾驶环境进行互动。在这项调查中,我们对DWM最新进展进行了全面概述 ...
潜在扩散模型的最新进展证明了它们对高分辨率图像合成的有效性。但是,从 Token 剂中,潜在空间的特性以更好地学习和生成扩散模型的生成仍然不足。从理论和经验上讲,我们发现改善的发电质量与具有更好结构的潜在分布密切相关,例如具有更少的高斯混合物模式和更具歧视性特征的分布 ...
自我播放在两人和多玩家游戏中具有突破性的突破。在这里,我们表明自我播放是另一个领域中出奇的有效策略。我们表明,健壮和自然主义的驾驶完全来自以前所未有的规模的模拟中的自我玩法-1 ...
在复杂的开放世界环境中实现类似人类的驾驶行为是自主驾驶的关键挑战。由于适应能力有限和学习复杂的多模式行为,人们对人类计划中通常表现出的复杂多模式行为,而不是提及他们对他们对他们的强烈依赖,因此基于现代学习的计划方法(例如模仿学习方法)通常努力平衡竞争目标和缺乏安全保证带有预定义规则的后备策略。我们为闭环计划提出了一个新型的基于 Transformer 的扩散计划者,该计划可以有效地对多模式驾驶行为进行建模,并确保轨迹质量而无需任何基于规则的改进 ...
尽管由大型语言模型 (LLM) 提供支持的基于 LLM 的代理可以使用外部工具和内存机制来解决复杂的现实任务,但它们也可能会引入严重的安全漏洞。然而,现有文献并未全面评估针对基于 LLM 的代理的攻击和防御。为了解决这个问题,我们引入了 Agent Security Bench (ASB),这是一个综合框架,旨在形式化、基准测试和评估基于 LLM 的代理的攻击和防御,包括 10 个场景(例如: ...
类增量故障诊断需要一个模型能够适应新的故障类,同时保留以前的知识。然而,对于不平衡和长尾数据的研究有限。从少量故障数据中提取判别性特征具有挑战性,并且添加新的故障类别通常需要昂贵的模型重新训练 ...
由于传感器、机器学习和人工智能的改进,自动驾驶取得了显着进步。然而,流行的方法难以应对复杂的场景和因果关系,阻碍了在不同环境中的适应性和可解释性。为了解决上述问题,我们引入了LeapAD,这是一种受人类认知过程启发的新型自动驾驶范式 ...
基于世界模型的搜索和规划被广泛认为是通向人类水平物理智能的一条有希望的道路。然而,当前的驾驶世界模型主要依赖于视频扩散模型,该模型专注于视觉生成,但缺乏结合动作等其他模式的灵活性。相比之下,自回归 Transformer 在多模态数据建模方面表现出了卓越的能力 ...
轨迹预测在提高自动驾驶汽车的安全性和可靠性方面发挥着至关重要的作用,是感知和规划之间的中间环节。然而,由于任务的高度动态和多模态性质,准确预测目标车辆的未来轨迹仍然是一个重大挑战。为了应对这些挑战,我们提出了一种用于多模态轨迹预测的自我车辆规划知情网络(EPN) ...
了解周围交通中车辆的意图对于自动驾驶汽车在高速公路强制并道等复杂交通场景中成功完成驾驶任务至关重要。在本文中,我们考虑了一种行为模型,该模型结合了交互驾驶员的社会行为和个人目标。利用该模型,我们开发了一种基于后退视野控制的决策策略,该策略使用贝叶斯过滤在线估计其他驾驶员的意图,并结合对不确定意图下附近车辆行为的预测 ...