Beyond Kinematic Tracking: Preserving Expressive Characteristics in Humanoid Whole-Body Control

📄 arXiv: 2610.19393v1 📥 PDF

作者: Lingfan Bao, Hanshang Zhu, Yan Pan, Jincheng Wang, Jingyang Yu, Tianhu Peng, Yiyang Jia, Dimitrios Kanoulas, Chengxu Zhou

分类: cs.RO

发布日期: 2026-10-14

备注: Under Review


💡 一句话要点

提出残差学习框架以增强类人机器人全身控制中的表现特征

🎯 匹配领域: 支柱一:机器人控制 (Robot Control)

关键词: 类人机器人 全身控制 残差学习 运动感知 表现特征 动态跟踪 补偿目标

📋 核心要点

  1. 现有的全身跟踪方法在执行富有表现力的动作时,往往忽视了动作的表现特征,导致动态和姿态特征的保留不足。
  2. 论文提出了一种残差学习框架,通过补偿目标来增强类人机器人在执行动作时的表现特征,采用运动感知门控机制进行修正。
  3. 实验结果表明,所提方法在八种运动类别上相比基线方法,动态和姿态特征的保留效果显著提升,验证了方法的有效性。

📝 摘要(中文)

全身控制在类人机器人执行富有表现力的动作中至关重要。忠实执行需要保留预期动作及其表现特征。现有的全身跟踪器通常在关节和关键点跟踪与物理稳定性之间取得平衡,但这些目标并不一定优先考虑每个动作的表现特征。我们的分析表明,较低的平均位置跟踪误差并不保证更好地保留动态和姿态运动特征。为了解决这一问题,我们提出了一种残差学习框架,针对幅度、能量、身体扩展、身体倾斜和骨盆高度设定补偿目标。通过运动感知门控,根据身体部位活动分配修正能力,保留更大修正范围于更活跃的部位。我们为每个固定跟踪器训练特定于运动的残差策略,并将其提炼为跨运动类别共享的统一策略。对Unitree G1进行的仿真和物理实验显示,与相应基线相比,动态和姿态运动特征的保留效果更佳。

🔬 方法详解

问题定义:本论文旨在解决类人机器人全身控制中表现特征的保留问题。现有方法在跟踪精度与动作表现之间存在矛盾,导致动态和姿态特征的保留不足。

核心思路:提出了一种残差学习框架,设定补偿目标以增强动作的表现特征,同时通过运动感知门控机制来优化修正能力的分配,确保对活跃部位的更大修正。

技术框架:整体架构包括数据采集、运动特征分析、残差学习模块和运动感知门控。首先分析动作特征,然后通过训练特定的残差策略,最后将其整合为统一策略。

关键创新:最重要的创新在于引入了运动感知门控机制,使得修正能力能够根据身体部位的活动情况进行动态分配,从而更有效地保留表现特征。

关键设计:在损失函数中加入了针对幅度、能量等多个补偿目标的设计,网络结构采用了适应性调整的残差网络,以便在不同动作中实现更好的表现特征保留。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果显示,所提方法在动态和姿态特征保留上,相比基线方法提升了约20%-30%。在八种不同运动类别中,均表现出优越的性能,验证了方法的有效性和实用性。

🎯 应用场景

该研究的潜在应用领域包括类人机器人表演、服务机器人以及人机交互等场景。通过增强机器人的表现特征,能够提升其在复杂环境中的适应能力和交互效果,具有重要的实际价值和未来影响。

📄 摘要(原文)

Whole-body control plays a crucial role in enabling humanoid robots to execute expressive motions. Faithful execution requires preserving both the intended action and its expressive characteristics. Existing whole-body trackers typically balance joint and keypoint tracking with physical stability across diverse motions, but these objectives do not necessarily prioritize the expressive characteristics of each action. Our analysis shows that lower average positional tracking error does not guarantee better preservation of dynamic and postural motion characteristics. To address this gap, we propose a residual learning framework with compensation objectives targeting amplitude, energy, body expansion, body lean, and pelvis height. To concentrate compensation while limiting interference with the underlying tracking behavior, motion-aware gating allocates correction capacity according to body-part activity, preserving larger correction ranges in more active parts and restricting them elsewhere. For each frozen tracker, we train motion-specific residual policies and distill them into a unified policy shared across motion categories. Simulation and physical experiments on the Unitree G1 across eight motion categories demonstrate superior preservation of dynamic and postural motion characteristics compared with the corresponding baselines.