- 从SMPC演示中学习移动操作:稀疏奖励的离线到在线强化学习该研究在仿真中用基于采样的模型预测控制(SMPC)作为自动专家生成大规模离线数据集,以绕开稠密奖励塑形的人工瓶颈,使离策略强化学习仅凭稀疏任务奖励即可训练。高层智能体与低层动态稳定性控制器结合后,学到的策略在任务目标对齐上超过原始最优控制教师。作者在配备机械臂的Spot四足机器人和G1人形机器人两种形态上部署了复杂移动操作技能,验证了sim-to-real框架的鲁棒性。
- 面向接触的射击法:用于动态运动重定向的接触隐式多重射击该论文提出接触隐式、基于直接仿真的多重射击(DSMS)框架,将运动学可行的参考轨迹转换为动力学可行的全身轨迹:把可微仿真器嵌入非线性规划,在内部处理接触、摩擦、碰撞、自碰撞与关节限制,同时施加跟踪、驱动和任务约束,无需预设接触时序或显式接触约束。作者称相比现有重定向方法,DSMS 可加速运动模仿强化学习训练,得到成功率更高、跟踪误差更低的策略;并在 Unitree G1 上完成零样本仿真到现实迁移,覆盖指令条件化行走、慢跑、接触密集爬行及 180 度跳跃转身。
- Zero-HLM:无需真实机器人数据的可泛化人形机器人移动操作Zero-HLM 提出 real-to-sim-to-real 框架,用智能手机拍摄与仿真源演示生成人形机器人移动操作训练数据,无需真实机器人数据。其高斯引导的智能体式重建对齐视觉与物理场景,运动-环境协同适应用 rollout 反馈修正全身参考与交互几何,共生成 4,800 条经物理验证的演示。在三个 Unitree G1 任务上,仿真训练的 GR00T N1.7 零样本迁移平均全任务成功率为 66.7%,真实数据训练为 46.7%;泛化配置下池化成功率由 23% 升至 69%。
- HuGe:利用第一人称经验扩展人形通用视觉-语言-动作模型研究团队提出 HuGe 系列人形通用视觉-语言-动作模型(VLA),在超过 2000 小时的第一人称人类与机器人数据上预训练,采用三种现有代表性 VLA 架构,为预训练全身控制器预测潜在运动 token 并输出手部控制信号。训练分三阶段:第一人称预训练、人形适配、下游微调;预训练时通过仿真回放构建伪本体感知状态,微调时通过重渲染修改第一人称观测中的手臂外观以缓解形态差异。HuGe 在仿真基准 HumanoidArena 上取得最先进结果;在 Unitree G1 上的真实实验显示,用视觉适配的第一人称示范增强机器人示范可显著提升抓取放置任务成功率。
- HumanoidNDM:通过人形机器人神经动力学模型弥合运动跟踪的训练-部署差距该论文提出 HumanoidNDM,一个由真实世界训练的神经动力学模型驱动的人形机器人运动跟踪在线微调框架,用于弥合训练与部署之间的动力学差距。数据采集阶段采用带自适应强度机制的低频参考扰动方法;模型训练阶段在欧氏空间中训练基于历史本体感知的神经动力学模型,并引入可微前向运动学,从而不依赖动作捕捉系统;策略微调阶段通过反向传播模型梯度直接微调策略。作者在 Unitree G1 机器人上完成物理验证,称其能快速适应多种扰动,并称这是首个面向人形机器人跟踪策略的在线、无需动作捕捉的微调框架。
- WorldFailBench:世界模型能否理解策略失败?研究者提出 WorldFailBench 基准,用于检验世界模型能否忠实模拟机器人策略的失败方式,包含失败原因、失败阶段、失败边界三项评估任务。基准覆盖 LIBERO 与 RoboTwin 仿真环境中的操作任务,以及 G1 人形机器人在真实世界执行的操作任务。对七个世界模型的实验显示,这些模型在理解策略失败方面存在显著差距。
- 面向人形机器人可恢复性监控的主动可达性学习研究提出一种面向人形机器人任务策略的运行时监控框架,用于在不可恢复跌倒发生前及时触发回退。该方法将监控器合成表述为学习给定回退策略的随机有限时域可恢复性包络,并把数据探索重构为到达-规避问题,由不确定性引导的探索器系统发现未见状态、避开确信不可恢复区域。框架在价值学习与主动探索之间迭代,结合时间差分与蒙特卡洛目标提升分布内价值预测与不确定性估计,并将高不确定性区域显式视为不可恢复以抑制分布外乐观幻觉。在随机基准和29自由度Unitree G1人形机器人上评估,监控覆盖率和准确性大幅提升,并实现零样本迁移到真实硬件。
- MOTIO:面向现实接地人形机器人移动操作智能体技能工程MOTIO 系统将人类动作视频、3D 资产、运动参考与可复用技能转化为人形机器人移动操作程序,通过上下文任务与接触推理构建分阶段交互,并借助物理执行、多帧反馈和人工验证迭代,无需任务特定遥操作或机器人演示采集。33 次带时间戳的首次批准中,智能体轮次时间中位数 97.0 分钟,请求到批准时长 2.80 小时。在扫描办公室中,G1 完成连续 101.75 秒的瓶子处理物理执行;物理细化使拧螺丝螺纹残差降低 76.0%。智能体生成的技能还用于监督 BC/DAgger 蒸馏至共享参考策略,同一检查点完成 18 个仿真任务,无需推理时专家干预。
- ViT-H:带运动跟踪反馈的生成式视频到人形机器人控制论文提出 ViT-H 框架,用扩散模型从单目人类视频直接生成人形机器人参考运动,跳过人体运动重建与重定向两步,并用下游运动跟踪结果通过直接偏好优化对生成器做后训练。作者还给出自回归变体,在 Unitree G1 上实现延迟低于 400 毫秒的实时视频遥操作。实验称其在运动质量与可执行性上优于现有“重建-重定向-跟踪”流水线,且随模型规模、预训练与后训练数据规模扩展表现良好。
- CoCarry:面向双人形机器人协同搬运的接触-支撑结构化重定向研究团队发布 CoCarry 数据集,含 220 条同步双人协同搬运序列,覆盖 21 种任务方案、5 种共享物体几何、4 种地形,总时长约 61 分钟。配套提出接触-支撑结构化重定向方法,围绕同一预设物体轨迹联合优化两台人形机器人,用物体局部手部锚点保持四手抓取关系。220 条序列重定向至两台 A3 人形机器人后接触保持率 0.9995,穿透时长较 GMR、OmniRetarget 分别降低 67.0% 和 71.0%,成功率 100%;在 Unitree G1 上的 CORE4D 测试接触保持率 0.9906、滑动为零,并经物理仿真与两台实体 A3 实验验证。
