跳到主要内容
Evolvant
订阅

机器人行业洞察

行业消息

  1. 论文提出 LogLook,一种面向前沿视觉语言模型机器人规划器的执行锚定记忆机制:系统保留执行日志与模型此前笔记,由模型决定查看位置,仅在预期变化处返回帧,并在检查所选部分前先略读演示。用基准的运动规划器测量,LogLook 在 token 减少 43%、图像用量不到一半的情况下达到与仅笔记记忆相同的成功率,因记忆或所见内容导致的失败回合大幅减少;直接控制下在 RoboMME 测试集上解决 93.5%。

    arXiv cs.RO研究具身智能大模型智能体

  2. MAST-VLA提出一种双条件机器人操作框架:在LLM主干中引入技能条件化的LoRA混合专家适配器,用技能查询token与路由偏置引导低秩专家特化;同时把预测的可供性热图转为动作头的patch级轨迹-可供性空间先验。在CALVIN ABC→D长时程多技能跨场景泛化设置上,五子任务评估序列平均长度达4.65,作者称达到最先进水平;真实机器人多技能序列实验验证了其在真实感知与控制噪声下的可部署性。

    arXiv cs.RO研究具身智能强化学习大模型

  3. 研究团队在Unitree Go2四足机器人上搭载AgileX Piper机械臂,实现闭环移动操作(loco-manipulation),并系统梳理了从固定基座机械臂迁移到腿式平台时,在数据采集、模型适配与推理设计上的实际需求。作者报告了使真机部署可行的关键选择,包括模型变体、动作时域和示教约定,并针对抓取放置任务区分数据覆盖与模型容量。结果显示,扩大示教覆盖使留出的末端执行器误差降低30%;引入推而非抓等次级技能可带来新行为模式且不降低基线性能。真机闭环实验表明数据集构成会影响任务成败。

    arXiv cs.RO研究四足机器人具身智能运动控制

  4. 论文提出 RoboCode,用共享的软门控基元动作接口学习跨任务复用的短时程动作模式:每个动作块被表示为多个已学习基元的软组合,而非单个离散编码;该接口从多任务汇集的动作块中学习后冻结,再训练任务特定的状态编码器将状态映射到共享潜空间。在五个 ManiSkill 操作任务上,动作块平均重建 MSE 为 0.0187,编码激活分析显示跨任务存在结构化编码复用;闭环平均成功率为 75.6%,高于 ACT 的 68.8% 和更大规模 Diffusion Policy 基线的 41.6%。

    arXiv cs.RO研究具身智能运动控制强化学习

  5. 研究团队发现 OpenVLA 激活的稀疏自编码器(SAE)表征含有可预测任务结果的信息,能在机器人进入不可恢复状态前预测失败。他们识别出强激活与成功或失败特定阶段对应的单个 SAE 特征,并通过定位特征激活显著变化的时间区间归纳出反复出现的行为模式。团队还构建基于 VLM 的解释流程为这些模式生成行为描述,并在留出区间上验证描述与特征激活的对应关系。

    arXiv cs.RO研究具身智能大模型多模态

  6. 研究将测试时训练(TTT)集成到InternVLA-A1与Pi0.5中,通过配对的人类演示与机器人轨迹训练,研究以演示为条件的动作生成,并实现两阶段间的记忆迁移与截断反向传播。实验覆盖视频、短视频与单帧线索任务,考察训练目标、梯度覆盖与对比正则化。在当前规模下,加入TTT并用配对数据训练,未能带来基于演示的一致目标选择;更短序列、全轨迹梯度连通与对比正则化也未明显提升对演示的响应;演示缩减为单帧线索时,真机执行仍偏好固定位置的杯子。

    arXiv cs.RO研究具身智能大模型多模态

  7. 该论文指出流匹配VLA部署中数值求解器深度与执行时域通常被解耦选择,并揭示二者存在由符号反转支配的计算-执行耦合:快速重规划下粗糙积分降低精度,但延长开环执行时粗糙积分反而提升任务表现,其机制是数值截断使横向动作离散度围绕不变的轨迹质心收缩,起到抑制开环漂移累积的隐式正则化作用。在LIBERO、RoboTwin 2.0及真实Franka操作任务上,针对π0、π0.5、GR00T等VLA骨干模型,利用该耦合可在无需训练、不改架构的前提下提升任务成功率并大幅降低推理延迟。

    arXiv cs.RO研究具身智能运动控制大模型

  8. DiscoDemo 将强化学习用作下游视觉运动模仿学习的数据生成器,而非可部署控制器:训练带特权信息的潜在条件 RL 生成器,结合并行逆向课程与成功门控多样性目标,产出多个成功闭环行为,经安全过滤后导出为静态数据集。在四个操作任务上,仿真中下游成功率由最强基线的 40% 升至 62%,真实机器人上由 39% 升至 78%,成功状态覆盖更广。作者称该多样性收益对预训练流匹配 VLA 有效,并与纠错数据采集互补。

    arXiv cs.RO研究具身智能强化学习大模型

  9. EgoForesight 提出一种视觉-语言-动作框架,联合利用机器人演示与第一人称视频训练策略,以降低含噪动作标签的影响。方法包含可靠性条件化损坏、可靠性加权回归,以及用指数移动平均教师从干净未来场景变化中蒸馏特权未来表征。在 30,000 小时预训练数据下,其扩展斜率比基线更陡,真实世界开环动作 MSE 降低 20.5%,RoboCasa 少样本成功率提升 8.1 个百分点;后训练后在仿真与真实灵巧操作中均表现较强。

    arXiv cs.RO研究具身智能强化学习大模型

  10. 研究用强化学习训练一个由20台月球小型机器人共享的策略,奖励仅为月夜结束时最冷5台机器人的平均温度,不涉及位置、间距或运动信息。结果涌现出聚集与在受庇护核心和暴露边缘间循环两种行为,与帝企鹅越冬方式相同。十次运行测得生存阈值为155.6±1.3 pcm-h(1 pcm-h=7.2 kJ),比静止抱团低37%,距物理下界13%以内;在静止抱团损失6台机器人的能量预算下全部存活。该行为无需共享空间参考和机器人间接触,可从20台迁移至40台而无需重训。

    arXiv cs.RO研究运动控制强化学习仿真与数字孪生

  11. WorldMirror 提出一种智能体化的真实到仿真框架,从野外机器人演示中构建可交互数字孪生,核心是把真实到仿真构建表述为对可执行世界程序的迭代精化。编码智能体负责分解场景、规划重建步骤并编排图像与三维生成工具,通过验证反馈修正程序;以相机位姿为锚的场景表示将世界组织为静态视觉上下文、支撑几何与可编辑交互资产。在 DROID 数据集上的实验显示,该方法能重建视觉逼真、几何一致的可交互世界,并保持所记录机器人轨迹的物理有效性。

    arXiv cs.RO研究具身智能仿真与数字孪生大模型

  12. 研究提出导航基础模型 RepresentNav,用三层 transformer(Representation Residuals)对多个视觉基础模型全深度特征做注意力,构建由策略目标驱动的自建表征空间,并在动作前用潜在思维链预测下一时刻场景表征,以 JEPA 架构端到端训练。在 VLNVerse 细粒度任务上成功率达 83.80%,较此前最优高 20.05 个百分点;EVT-Bench 干扰物跟踪单相机达 85.5%(+10.1);相同编码器下自建空间优于拼接输出,想象使碰撞减少四分之一。单个潜在表征可解码未来场景的深度、语义与三维占据,占据无监督仍优于预训练编码器作用于真实未来帧。

    arXiv cs.RO研究具身智能大模型多模态

  13. FORCA 以视觉观测和腕部力/力矩测量为输入,自动编写用于接触探测与力响应运动的 Python 程序,并在多次执行之间结合力记录与视觉结果诊断失败、修订运动与力反馈控制逻辑。该方法无需演示数据、任务特定训练或仿真环境。在五个真实机器人任务上,FORCA 在提升操作精度、适应物体或表面属性变化、在表面变化与物体运动下调节接触三类场景中验证有效;与纯视觉变体相比,抓取精度与任务成功率提高,擦拭和剥离中的接触丢失减少。

    arXiv cs.RO研究具身智能传感器运动控制

  14. 研究提出 P³-WAM 统一世界动作模型,面向第一视角灵巧操作,包含 Perceive(从视频重建关节手部运动与相机轨迹)、Predict(按给定动作生成视觉未来)、Plan(以初始图像、语言指令和可选视觉目标为条件,联合生成动作轨迹与预期视觉后果)三种模式。模型采用混合 Transformer 架构,将结构化三维动作表示接入预训练视频扩散 Transformer,共享基础权重并设模态特定适配与双向视觉-动作注意力,随机化模态可见性使视频与三维动作可作条件或预测目标。实验称统一训练在四项数据集的三维手部重建与动作条件视频预测上优于专用基线,生成的操作视频在指令遵循与动作推进上强于视频生成基线。

    arXiv cs.RO研究具身智能灵巧手大模型

  15. 研究在RoboDojo基准的六项操作任务上,于多种推理强度与服务层级设置下评估了九个前沿多模态语言模型直接控制实体机械臂的能力,称这是首次在实体硬件上对广泛前沿LM做系统性比较。结果显示当前模型能完成多种操作任务,但精度与效率不足以在实用动作预算内完成。2026年7月至10月间基准性能翻倍时间为53.9天,最佳执行速率提升4.4倍,最低执行成本下降6.2倍。

    arXiv cs.RO研究具身智能运动控制大模型

  16. 研究团队提出 TRACE,一个面向 Unitree G1 人形机器人的语言条件运动生成与编辑框架,将生成条件锚定在成对训练动作、编辑目标锚定在当前动作上。语言模型从运动数据中学习预测支撑、根节点与手部事件,其时间对齐编码与原始文本共同输入扩散生成器;重力参考状态与轨迹—接触目标用于提升运动学一致性。编辑阶段由类型化请求定义身体—时间范围与相对源目标,参考条件扩散编辑器结合修订事件完成修改,采样时投影保留受保护状态坐标。定量与人工评估显示语义对齐和运动质量优于对比方法,多轮编辑在共享保留约束下执行更可靠,代码已开源。

    arXiv cs.RO研究人形机器人运动控制大模型

  17. 维也纳工业大学(TU Wien)团队提出零样本框架V2-STRep,将视频生成模型合成的操作视频中的运动转换为可复用机器人技能。该方法用VLM生成结构化任务表示,指定运动阶段、参考对象与约束,目标以点、点法线、轴、平面和6D位姿等最小几何结构描述;VLM给出的2D图像线索经RGB-D观测提升至3D,用于重建任务几何与候选抓取位姿。几何规则负责跨场景运动迁移,任务约束轨迹优化将抓取选择与完整运动规划耦合,并利用剩余旋转自由度适应关节限制。在六个真实操作任务上,执行成功率高于基线,技能可跨场景迁移,并可通过更新部署基础与约束适配新指令而无需重新生成视频。

    arXiv cs.RO研究具身智能运动控制大模型