QPGesture: Quantization-Based and Phase-Guided Motion Matching for Natural Speech-Driven Gesture Generation

由于人体运动的连续睡眠，语音驱动的语音生成突发。此外，人类语音和语音之间存在固有的异步关系。为了应对这些挑战，我们引入了一种新颖的基于仿真和相位引导的运动匹配框架... ...

PFPN: Continuous Control of Physically Simulated Characters using Particle Filtering Policy Network

使用强化学习进行基于物理的角色控制的数据驱动方法已成功应用于生成高质量的动作。然而，现有的方法通常依赖高斯分布来表示动作策略，在解决高度清晰的角色的高维连续控制问题时，它可能会过早地采取次优动作。在本文中，为了提高基于物理的角色控制器的学习性能，我们提出了一个框架，该框架将基于粒子的动作策略视为高斯策略的替代品 ...

From Universal Humanoid Control to Automatic Physically Valid Character Creation

自动设计虚拟人类和类人机器人在帮助游戏、电影和机器人的角色创建过程方面具有巨大的潜力。在某些情况下，角色创建者可能希望设计针对某些动作（例如空手道踢腿和跑酷跳跃）定制的人形身体。在这项工作中，我们提出了一个人形设计框架，可以根据预先指定的人体运动序列自动生成物理上有效的人形身体 ...

Skeleton2Humanoid: Animating Simulated Characters for Physically-plausible Motion In-betweening

人体运动合成是数字孪生和元宇宙中各种应用中长期存在的问题。然而，基于深度学习的现代运动合成方法几乎没有考虑合成运动的物理合理性，因此它们通常会产生不切实际的人体运动。为了解决这个问题，我们提出了一个系统“Skeleton2Humanoid”，它通过在物理模拟器中规范合成的骨架运动来在测试时执行面向物理的运动校正 ...

Stable Motion Primitives via Imitation and Contrastive Learning

向人类学习可以让非专家轻松地对机器人进行编程，从而减少构建复杂的机器人解决方案所需的资源。然而，这种数据驱动的方法通常缺乏为其学到的行为提供保证的能力，而这对于避免失败和/或事故至关重要。在这项工作中，我们专注于到达/点对点运动，机器人必须始终到达目标，无论其初始状态如何 ...

ASE: Large-Scale Reusable Adversarial Skill Embeddings for Physically Simulated Characters

人类所执行的令人难以置信的运动能力是通过大量的练习和经验获得的大量通用运动技能才能实现的。这些技能不仅使人类能够执行复杂的任务，而且还可以学习新任务时指导他们的行为提供了强大的先验。这与基于物理的角色动画的常见做法形成了对比，其中控制策略通常是针对每个任务从头开始训练的... ...

TPA-Net: Generate A Dataset for Text to Physics-based Animation

视觉-语言（V＆L）联合研究最近取得突破，在各种文本驱动任务中取得了显着的成果。高质量文本转视频（T2V）这项长期以来被认为是不可能完成的任务，在最新的研究中被证明是可行的，并取得了相当好的结果。然而，生成的视频通常会出现不需要的伪影，这主要是因为系统纯粹是数据驱动的并且与物理定律无关 ...

UniCon: Universal Neural Controller For Physics-based Character Motion

由于视频游戏和电影中对真实感的需求不断增加，基于物理的动画领域变得越来越重要，并且最近广泛采用了数据驱动技术，例如深度强化学习（RL），它从（人类）学习控制）示威。虽然强化学习在再现个体运动和交互式运动方面显示出令人印象深刻的结果，但现有方法在推广新运动的能力以及交互式地组成复杂运动序列的能力方面受到限制。在本文中，我们提出了一种基于物理的通用神经控制器（UniCon），它通过学习大规模运动数据集来学习掌握数千种不同风格的运动 ...

Solid-Fluid Interaction with Surface-Tension-Dominant Contact

我们提出了一种新颖的三向耦合方法来模拟强表面张力驱动的固体和流体之间的接触相互作用。我们物理模型的核心是薄液膜，它同时耦合到液体体积和刚性物体，促进精确的动量传递、碰撞处理和表面张力计算。该模型在混合欧拉-拉格朗日框架下进行数值实现，其中膜被建模为单纯网格，液体体积在背景笛卡尔网格上进行模拟 ...

Brax -- A Differentiable Physics Engine for Large Scale Rigid Body Simulation

我们推出 Brax，这是一个用于刚体仿真的开源库，重点关注加速器的性能和并行性，用 JAX 编写。我们展示了一系列任务的结果，这些任务的灵感来自于现有的强化学习文献，但在我们的引擎中进行了重新设计。此外，我们在 JAX 中提供 PPO、SAC、ES 和直接策略优化的重新实现，这些优化与我们的环境一起编译，允许学习算法和环境处理在同一设备上进行，并在加速器上无缝扩展 ...