WAM-TTT:在测试时通过观看人类操作来引导世界-动作模型
论文提出 WAM-TTT 测试时训练框架,通过自监督视频预测将原始人类视频吸收进冻结的世界-动作模型(WAM)内部的轻量自适应记忆,而非将人类视频当作模仿轨迹。研究引入元训练阶段,利用配对的人-机器人数据和键值记忆重建目标,将人类演示与机器人行为对齐。测试时仅需无标注人类视频即可适配记忆,预训练 WAM 保持冻结,无需机器人动作、人工标注或任务特定微调。实验显示其在多种操作任务与泛化设置下持续优于上下文人类视频条件基线。
发布于 10-27 10:55来源:arXiv cs.RO
转载 · 官方发布原文:arXiv cs.RO ·《WAM-TTT: Steering World-Action Models by Watching Human Play at Test Time》查看原链
WAM-TTT:在测试时通过观看人类操作来引导世界-动作模型
