随着VR技术的发展,特别是元宇宙概念的出现,视觉与触觉感知的融合已经成为人机交互中的一种预期体验。因此,在VR应用中实现视觉和触觉信息的时空一致性成为实现这种体验的必要因素。最先进的振动触觉数据集通常包含通过在物体表面随机滑动收集的时间级振动触觉信息,以及材料/纹理的相应图像 ...
本文介绍了Bytewrist,这是一种用于机器人操纵的新型高度柔滑且拟人化的平行手腕。 Bytewrist通过与ARC形末端链接集成的紧凑型三阶段平行驱动机制通过紧凑的三阶段平行驱动机制来解决狭窄空间操作中现有串行和平行手腕的临界局限性。该设计在保持出色的紧凑性的同时,可以实现精确的RPY(滚动)运动,使其特别适合复杂的非结构化环境,例如家庭服务,医疗援助和精确组装 ...
大型语言模型(LLM)预处理,填充和评估依赖于输入空间重建和生成能力。然而,在嵌入空间训练目标的视觉中已经观察到了,例如 ...
由于其高度的自由度和复杂的机制,对现代机器人的准确模拟仍然具有挑战性。神经模拟器已成为传统分析模拟器的有前途替代方案,能够有效预测复杂的动态并适应现实世界数据。但是,现有的神经模拟器通常需要特定于应用程序的培训,并且未能推广到新的任务和/或环境,这主要是由于全球状态的表示不足。在这项工作中,我们解决了学习可通用的神经模拟器的问题,该机器人构成刻有刚体的身体 ...
不断升级的人工智能(AI)要求暴露出一个关键的“计算危机”,其特征是能源消耗不可持续,培训成本过高以及传统CMOS扩展的即将限制。基于物理的应用程序特定的集成电路(ASIC)通过直接利用固有的物理动力来计算而不是花费资源来执行理想化的数字抽象来提出变革性范式。通过放松传统ASIC所需的限制,例如执行的无状态,单向性,确定性和同步,这些设备的目的是作为对物理过程的确切实现,从而在能源效率和计算吞吐量方面实现了可观的增长 ...
设计进行高级计算的超材料构成了重大挑战。强大的设计策略将问题分为两个步骤:首先,在离散或紧密结合模型中编码所需的功能,其次,识别符合模型的超材料几何形状。将此方法应用于信息处理任务需要准确地映射非线性 - 计算的重要元素 - 从离散模型到几何形状 ...
本文介绍了Robomatch,这是一个具有自动匹配网络体系结构的新型统一远程操作平台,旨在解决动态环境中的长马利琴事件。我们的系统增强了远程操作的性能,数据收集效率,任务准确性和操作稳定性。 Robomatch的核心是一种驾驶舱风格的控制接口,可实现移动基础和双臂的同步操作,从而显着提高了控制精度和数据收集 ...
本文介绍了一般机器人操纵的Visuomotor模仿学习政策,该政策会产生精确的,高维的动作,以各种视觉,语言和本体感受的输入为条件。我们利用一致性训练利用流量匹配,以在仅1-2个推理步骤中实现高质量的灵巧动作生成。为了有效地处理各种输入模式,我们提出了DIT-X,这是一种具有自适应交叉注意的扩散 Transformer 体系结构和Adaln-Zero条件,可以在动作 Token 和多模式观察之间进行细粒度的特征相互作用 ...
输入空间重建是一个有吸引力的表示范式。尽管重建和产生的解释性可以解释性,但我们确定了通过重建学习与学习学习之间的错位。我们表明,前者将模型的能力分配给数据的子空间,解释了观察到的方差 - 这是一个具有不明智特征的子空间 ...
人工智能和边缘计算的融合引起了人们对直接在资源受限设备上启用智能服务的日益兴趣。尽管传统的深度学习模型需要大量的计算资源和集中的数据管理,但由此产生的延迟,带宽消耗和隐私问题已经暴露了以云为中心的范式的关键限制。脑启发的计算,尤其是尖峰神经网络(SNN),通过模拟生物学神经元动力学来实现低功率,事件驱动的计算,提供了一种有希望的替代方法 ...