跳到主要内容
Evolvant
订阅

先规划后执行:面向机器人控制可执行记忆的流式推理

研究提出 PAL(Plan first, Act Later)分层记忆框架,用于视觉-语言机器人操作,包含短期视觉缓冲、语义事件记忆和可执行 subtask_list。高层 VLM 将流式视觉观测转为 subtask_list,执行时选取当前相关子任务交给底层 VLA 策略;配套两阶段数据生成,先扩展稀疏更新监督,再用任务落地验证的自标注生成训练数据。在 RoboMME 上成功率达 56.05%,超过最强基线 FrameSamp-Modul 的 44.51%;四项真实操作任务总体成功率 60.83%,高于 MemER 的 45.00% 和 FrameSamp-Modul 的 28.33%。

发布于 10-22 13:00来源:arXiv cs.RO

转载 · 官方发布原文:arXiv cs.RO ·《Plan First, Act Later: Streaming Reasoning for Executable Memory in Robot Control》查看原链

先规划后执行:面向机器人控制可执行记忆的流式推理

来源arXiv cs.ROen原文发布 10-22访问原文