我们提出了一种使用深度强化学习为物理模拟的人形角色重现复杂的多角色交互的方法。我们的方法学习角色的控制策略，不仅模仿单个动作，还模仿角色之间的交互，同时保持平衡并匹配参考数据的复杂性。我们的方法使用基于交互图的新颖奖励公式，该交互图测量交互地标对之间的距离 ...
对象由多个部分组成，每个部分都具有不同的几何形状、物理特性、功能和可供性。开发这种分布式的、物理的、可解释的对象表示将有助于智能代理更好地探索世界并与世界交互。在本文中，我们研究物理基元分解——通过其组件来理解对象，每个组件都具有物理和几何属性 ...
在 3D 中嵌入人类和铰接式物体交互 (HAOI) 是更深入理解人类活动的重要方向。与之前使用参数化和 CAD 模型来表示人类和物体的工作不同，在这项工作中，我们提出了一种新颖的基于 3D 几何基元的语言来编码人类和物体。鉴于我们的新范式，人类和物体都是基元的组合，而不是异构实体 ...
我们解决了由文本提示驱动生成逼真的 3D 人机交互 (HOI) 的问题。为此，我们采取模块化设计，将复杂的任务分解为更简单的子任务。我们首先开发了一个双分支扩散模型（HOI-DM），以根据输入文本生成人类和物体运动，并通过人类和物体运动生成分支之间的交叉注意通信模块来鼓励连贯运动 ...
综合语义感知、长期的人与物体交互对于模拟现实的人类行为至关重要。在这项工作中，我们解决了在 3D 场景中由语言描述引导生成同步对象运动和人体运动的挑战性问题。我们提出了可控人与物体交互综合（CHOIS），这是一种使用给定语言描述、初始物体和人类状态以及稀疏物体路径点的条件扩散模型同时生成物体运动和人体运动的方法 ...
在情境环境中对人类行为进行建模在角色动画、具体人工智能、 vr/ar和机器人领域有着广泛的应用。在现实场景中，人类经常与环境交互并操纵各种物体来完成日常任务。在这项工作中，我们研究了用于操纵大型物体的全身人体运动合成问题... ...
我们正在见证从文本生成 3D 对象的技术的重大突破。现有方法要么利用大型文本到图像模型来优化 3D 表示，要么在以对象为中心的数据集上训练 3D 生成器。然而，生成整个场景仍然非常具有挑战性，因为场景包含多个多样化且分散的 3D 对象 ...
我们推出 WonderJourney，一个用于永久 3D 场景生成的定制框架。之前开始专注于单一类型场景的视图生成工作不同，我们从用户提供的任何位置（通过文本描述或）图像，并通过一系列不同的但连贯的3D场景生成一个旅程。我们利用LLM生成这个旅程中场景的文本描述，利用文本驱动的点云生成管道来制作引人注目且连贯的3D场景序列，并利用大型VLM来验证生成的场景... ...
近来，文本驱动的 3D 场景生成技术取得了快速进展。他们的成功主要是使用现有的生成模型迭代来执行图像变形和修复以生成 3D 场景。然而，这些方法严重依赖于现有的输出模型，导致几何和外观方面的托盘堆积，从而阻止模型在各个场景中的使用（例如，... ...
我们介绍 RealmDreamer，这是一种根据文本生成通用前向 3D 场景的技术。我们的技术优化了 3D 高斯泼溅表示以匹配复杂的文本提示。我们通过利用最先进的描述到图像生成器来初始化这些图，将它们的样本提升为3D，并计算隐藏体积... ...