论文提出 MAPLE(Mondrian-Anchored Prior for Learning-free Indoor Exploration),一种无需训练的室内探索预测方法:将蒙德里安过程改造为在线生成式先验,以当前部分地图中观测到的几何线索为条件,生成多个可能的地图假设,并在每个假设内分别评估可见性以估计前沿增益。在 KTH 平面图及多种传感器范围下的真实 SLAM 环境中,MAPLE 一致优于非预测式探索,并与基于学习的预测方法保持竞争力;其轻量过程式构建可在有限算力下运行。实验还显示,更准确的地图预测不一定带来更好的探索效果,预测的表示与使用方式同样关键。
机器人行业洞察
今日精选
The robotics journal行业消息
研究提出REACT框架,从人-人动作捕捉演示中学习可部署的人形-人交互策略,将语义接触结构作为连接演示处理、交互学习与机载控制的关键监督信号。流程包括VLM引导的接触建模与重定向、基于交互感知接触奖励的特权策略学习,再蒸馏为仅用机载自我中心深度传感的策略,并引入生成式伙伴状态建模以应对遮挡。在仿真和Unitree G1真机上测试五种接触丰富交互,语义接触建模改善演示交互保留,生成式建模在五种交互中的四种提升接触召回,真机上仅靠机载传感完成全部五种交互。
arXiv 2610.28431v1 提出 TaskWAM,一个闭环、阶段感知的世界-动作模型(WAM)框架,用 Mode Tokens 表征细粒度任务要求、用 State Tokens 跟踪执行进度,形成结构化任务状态以引导生成朝向预期未来,针对长时程操作中相似观测-动作片段导致的“阶段混淆”问题。作者同时提出 StageBench 多阶段操作基准,含参数化阶段变化与自动评估。实验称在仿真与真实任务上减少混淆并与 SOTA 方法性能相当,且可即插即用迁移到单臂、双臂夹爪、灵巧手与人形机器人等异构架构与本体。
论文提出 GPT-as-Tactile-Policy 方法:将专家演示总结为任务指导与触觉参考,GPT-6-Astra 结合多模态观测与交互历史生成控制指令,并依据接触反馈调整动作。在无需机器人专用预训练和逐任务微调的情况下,该方法在五个 UniVTAC 接触密集型操作任务上平均成功率为 93.8%,与现有最优策略相当,部分任务更高;Insert Hole 任务中触觉反馈将成功率从 31% 提升至 99%。执行分析显示模型能进行接触引导的试探与纠正。
研究团队提出 CAPSafe 基准,用于评估 LLM 具身智能体的安全推理,包含动作级与计划级两个数据集:前者判断单个动作在给定环境上下文中是否安全,后者评估智能体能否为复杂危险家务任务生成安全的长时程计划。该基准对危险的情境性(由物体属性推断)、多危险共存及相对严重程度进行建模。对 9 个闭源与开源 LLM 的评测显示,危险识别与安全长时程规划之间存在显著差距:多个模型识别不安全动作的准确率超过 90%,但安全长时程规划明显更难,Gemini-3-pro 安全成功率最高为 78.19%,其余模型均低于 65%。
论文提出一个两阶段框架,从多视角视频片段中学习互补的预测表征:预训练阶段用冻结的3D基础模型提供稠密几何特征,将其压缩为预测几何表征并优化以保留场景结构及其时序演化,再对几何过渡施加动作监督,提取强调动作相关过渡的互补运动表征;下游后训练阶段通过几何查询迁移预测几何,运动表征则沿动作生成路径引导中间特征,未来观测仅在训练时作为特权监督、推理时不需要。在LIBERO、LIBERO-Plus、SimplerEnv及真实双臂与单臂任务上,该方法一致提升下游策略,在WidowX评测上绝对提升10.4个百分点,并在多种VLA架构与WAM上验证了迁移效果,代码将发布于GitHub。
研究团队在 RoboColiseum 上对 GPT-6 Astra、GPT-6.1 Sol、Claude Opus 5.5、Gemini 4 Argon 四个模型开展指令跟随、空间推理、通用操作、鲁棒性四赛道对比评测,通过 Agent2Act 控制框架接入共享观测、动作执行与反馈接口。结果显示四模型能力画像一致:指令跟随得分高(三个接近满分)、空间推理强、通用操作得分低于其他三赛道;Astra 在指令跟随与鲁棒性领先,Opus 在空间推理、通用操作与综合表现领先。组件对比表明框架设计影响任务成功率、规划成本与执行时间,案例研究覆盖全身协调、跨形态操作、精细操作、灵巧手操作与真机任务。
论文提出 DirectWAM,通过动作充分蒸馏把预训练的扩散视频专家与动作专家转为单步预测器,保留显式的未来到动作级联,无需随机采样;训练时从预测未来解码动作并将演示动作误差经专家反向传播,可选加入未来潜在重建损失。在四个 LIBERO 套件上平均成功率 97.1%,RoboTwin 2.0 上 85.4%,相同每流一次评估预算下优于 Flash-WAM,并扩展到三个真实世界任务;相比完整迭代教师模型推理延迟降低 28.0 倍。
研究团队提出 RoboCasa-Shift,一个基于 RoboCasa365 的诊断性鲁棒性基准,采用受控单因素偏移、共享底层设置的干净-扰动配对 rollout 和仿真器阶段感知诊断。在四个长时程家庭操作任务、四种扰动因素与三个校准严重度下评估 GR00T N1.5,共完成 1,040 次正式 rollout。结果显示鲁棒性响应随因素和任务差异显著,严重度提升不总带来单调退化:某相机条件下 80 个配对回合中 8 个结果改变但 ΔSR=0;相机 L2 与高斯模糊 L1 的 ΔSR 同为 0.188,第一阶段失败率却分别为 19.0% 和 36.4%。代码已开源。
PACT-VLA 是一个无需训练的框架,用于解决 VLA 策略异步推理中动作块基于过时观测的问题:它从推理起始观测生成多个候选动作块,并利用提交前观测复用冻结的 VLA 策略进行选择,评分函数 FlowRes 衡量候选隐含流方向与策略预测速度的残差,无需额外验证器。流水线实现使选择不增加控制步延迟。在四步延迟下,Kinetix 上平均成功率比 RTC 高 15.0 个百分点,LIBERO 上比 GR00T N1.7 单候选异步执行高 5.2 个百分点;三个真实机器人任务上,使用同一冻结 π0.5 检查点,平均成功率从朴素异步执行的 60% 提升到 82%。
arXiv 2610.28011v1 提交了一篇研究,考察期望自由能(EFE)能否作为测试时计算控制器,决定在世界模型规划中投入多少计算。作者把目标距离与随机预测间的分歧合成一个 EFE 式目标,分别测试候选评分、停止规则和在线预测器更新。结果显示:当精英成本停滞即停止,在成功率随深度趋于平台的任务上会减少细化,平均成功率接近固定深度参考;较大权重下奖励分歧会降低冻结模型的成功率,惩罚分歧则因任务和权重而异。训练数据缺少到达目标所需区域时,在线更新可恢复部分损失;成本停滞规则在后续优化利用模型错误时会失效,因为任务成功率见顶后预测成本仍下降。
LocoPilot 在12自由度 Unitree Go2 四足机器人上实现单操作员双边遥操作与数据采集,该机器人搭载6自由度 AgileX Piper L 机械臂、RealSense D435 腕部相机与 D405 头部相机;第二台 Piper L 作为主端,配合两个手持控制器同时控制基座、机体姿态、机械臂与夹爪。从端交互力在无专用力/力矩传感器条件下估计,经无源性约束力觉通道反馈给操作员;ROS 2 流水线记录同步多模态观测与遥操作、部署共用的11维动作。作者在多个移动操作任务上评估接口,并在抓取放置示范上微调 MolmoAct2 后部署到实体机器人,无需动作重定向或额外逆运动学。
arXiv 论文 HuTact 提出从大规模人类手-物交互(HOI)数据预训练触觉感知手部表征,预训练阶段不使用真实触觉信号,再将人类手部运动中的交互结构迁移到机器人触觉观测,并可用少量无标注机器人交互数据适配。在抓取预测、滑动检测、物体分类和触觉条件策略学习任务上,HOI 预训练提升了数据效率。抓取预测中,经 HOI 预训练并在无标注机器人自由交互数据上中期训练后,仅用 25% 下游标注数据即达 88.26% Macro-F1,与全量标注从头训练的 88.23% 相当。
EventSync 提出一种事件驱动的分层框架:视觉语言模型依据任务计划与交互历史生成子目标,视觉语言-动作模型执行,轻量级事件监视器结合视觉观测与末端执行器轨迹判定子目标是否完成,仅在获得完成证据后才写入已完成子目标历史并触发后续推理。该方法在 RoboMME 基准上总体成功率为 64.5%,比该基准报告的最佳基线高 20.0 个百分点;并在四个记忆需求不同的真实机器人任务上完成验证。
研究团队提出遥操作界面PointHand,将多指机器人手渲染为指尖与关节的稀疏关键点,与策略可观测的关键点一致。在模拟的“杯中取物入盒”任务中,18名新手与4名专家在三种渲染方式下共采集2200次试验:看到仅强调拇指和食指的新手从600次试验中获得441次成功示教,而看到真实手形的新手为320次。用这些示教训练扩散策略并将观测替换为手部关键点与两个物体关键点后,400步内该条件从点云策略下三种新手条件中最弱的46.3%升至关键点策略下最强的57.3%,五个随机种子均提升11.0个百分点;强调全部关键点的示教变化至多+0.7个百分点。
该研究提出一种多视角潜在动作模型(LAM),用交叉注意力融合同步多相机视角,先解析深度与遮挡,再压缩为潜在动作;潜在动作输入由冻结VLM主干、潜在专家与动作专家经序列流匹配耦合的策略。在严格跨具身设定下,双视角LAM预训练使真值6D动作可解码性较单视角提升17%,而单视角数据扩大两个数量级仍不足以完全恢复平面外运动;下游策略成功率提升+13.5%,单视角LAM为+6.2%。单一跨具身数据即可实现技能迁移,增加第二个视角优于再增加最多四个具身;在硬件上以人类手部演示迁移,850次rollout中成功率较仅动作策略提升+20%。
该预印本提出以自适应通行管(ATT)为核心的姿态感知导航框架,将沿参考路径的通道宽度场与社交舒适度统一为连续信号,并通过区间速度—航向(IVH)控制把宽度映射为正面到侧步的连续姿态调度与全向速度指令。配套的以速度为条件的 AMP 策略使用经 GVHMR 重定向的正面/侧步运动数据训练,并加入 (v_x, v_y) 跟踪奖励,目标是在保持与默认机载策略可互换的同时提升姿态过渡稳定性。论文称完整方法已给出,计划在 Unitree G1 上开展评估,量化结果尚未发布,MuJoCo 仿真与真机演示视频已公开在 GitHub。
论文提出 AWLS(优势加权潜在引导),一种离线后训练方法,用于改进已冻结的单步生成式机器人操作策略,且不更新其解码器。该方法学习一个以观测为条件的残差噪声整形器,对策略的潜在噪声做残差修正,并用优势加权的动作重建目标训练;优势值经分离与尺度归一化后仅作为演示动作的监督权重,避免评论家梯度更新策略,同时保留单步推理速度。作者还提出无需 rollout 的解码器敏感度准则,用于挑选对潜在噪声扰动仍敏感的预训练检查点。在仿真与真实机器人操作任务(干净与混合质量演示)上,AWLS 优于冻结基座策略并限制相对预训练行为先验的漂移。
该研究提出 CovNav,一个无需训练的框架,用共形预测(CP)决定具身智能体何时需要慢思考:本地 LLM 在快速模式下判断目标是否可能在已观测物体附近,CP 将 token 概率转为预测集,仅对模糊查询升级到慢速思维链推理。在 Gibson 和 HM3D 上,HM3D v1 与 v2 成功率分别超过最强零样本基线 0.8 和 1.7 个百分点,仅对 12.4% 的查询调用慢推理,并在较低延迟下保留常开思考的大部分收益;TurtleBot 4 真机实验进一步验证。
提出EchoNav框架,从短RGB序列预测证据鸟瞰图(BEV)表示,结合时序聚合与占据补全,解码器适配冻结的VGGT-Omega特征,用逐单元权重和可学习的不更新选项组合历史残差提议;BEV预测器在最新自车坐标系生成局部地图,无需深度、相机位姿输入或显式几何变换。模型在仿真RGB序列及完整/可见性掩码占据标注上训练。仿真顺序双目标导航成功率89.6%,比最强基线高32.5个百分点;20个场景60次轮式机器人试验成功率73.3%,基线33.3%,另有四足与人形机器人演示。

