Learning a general humanoid whole-body controller is challenging because practical reference motions can exhibit noise and inconsistencies after being transferred to the robot domain, and local defects may be amplified by closed-loop execution, causing drift or failure in highly dynamic and contact-rich behaviors. We propose a dynamics-conditioned command aggregation framework that uses a causal temporal encoder to summarize recent proprioception and a multi-head cross-attention command encoder to selectively aggregate a context window based on the current dynamics. We further integrate a fall recovery curriculum with random unstable initialization and an annealed upward assistance force to improve robustness and disturbance rejection. The resulting policy requires only about 3.5 hours of motion data and supports single-stage end-to-end training without distillation. The proposed method is evaluated under diverse reference inputs and challenging motion regimes, demonstrating zero-shot transfer to unseen motions as well as robust sim-to-real transfer on a physical humanoid robot.


翻译:学习通用的人形机器人全身控制器具有挑战性,因为实际的参考运动在迁移至机器人领域后可能表现出噪声与不一致性,且局部缺陷可能因闭环执行而被放大,导致高动态、多接触行为中的漂移或失败。我们提出了一种基于动力学条件的指令聚合框架,该框架使用因果时序编码器来汇总近期的本体感知信息,并利用多头交叉注意力指令编码器,根据当前动力学状态选择性聚合上下文窗口。我们进一步整合了包含随机不稳定初始化和退火式向上辅助力的摔倒恢复课程,以提升鲁棒性与抗干扰能力。所得策略仅需约3.5小时的运动数据,并支持无需蒸馏的单阶段端到端训练。所提方法在多样化参考输入与具有挑战性的运动模式下进行评估,结果表明其能实现未见运动的零样本迁移,并在实体人形机器人上完成鲁棒的仿真到现实迁移。

0
下载
关闭预览

相关内容

【斯坦福博士论文】移动操作机器人的学习系统构建研究
专知会员服务
14+阅读 · 2025年11月14日
《拥挤与受限环境下机器人集群协同控制》150页
专知会员服务
21+阅读 · 2025年5月4日
【斯坦福博士论文】大模型驱动的鲁棒机器学习,243页pdf
《结合机器人行为以实现安全、智能的执行》
专知会员服务
16+阅读 · 2023年7月4日
使用强化学习训练机械臂完成人类任务
AI研习社
14+阅读 · 2019年3月23日
【机器人】机器人PID控制
产业智能官
10+阅读 · 2018年11月25日
进攻机动作战中的机器人集群
无人机
31+阅读 · 2017年12月4日
国家自然科学基金
13+阅读 · 2016年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
13+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
23+阅读 · 2009年12月31日
VIP会员
相关基金
国家自然科学基金
13+阅读 · 2016年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
13+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
23+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员