跳到主要内容
Evolvant
订阅

机器人行业洞察

行业消息

  1. 该论文提出 MimicAll 强化学习框架,用结构化具身描述符编码全局与关节对齐条件,结合观测历史和身体匹配的运动参考预测关节目标偏移,支持跨异构人形机器人共享全身运动跟踪。训练覆盖 16 个人形机器人家族的 4,096 个变体,并构建含 464 个身体、五个分布层级的基准。相同训练转移量下,共享训练在 100STYLE 随机化 G1 身体上 30 秒成功率为 99.4%,单身体专用策略为 42.9%;身体条件不匹配使自注意力成功率从 61.7% 降至 47.0%。

    arXiv cs.RO研究人形机器人具身智能运动控制

  2. arXiv 新论文提出 HA-DiPO(异构智能体扩散策略优化),一个面向异构腿式机器人协同搬运非固定共享负载的分层多智能体强化学习框架,采用集中训练、分散执行(CTDE)架构。高层由集中式评论家利用团队价值估计联合训练各机器人独立的协调策略,低层用本体特定的鲁棒运动策略跟踪协调指令;高层采用扩散策略而非单高斯参数化,以表示潜在的多模态协调响应。策略通过奖励驱动的仿真交互从零学习,无需演示数据;执行时各机器人仅用本地机器人与负载观测生成指令,不依赖伙伴状态或机器人间通信。仿真中最终平均回报、速度跟踪成功率高于基线且速度误差更低,真机实验演示了四足轮腿机器人与人机协同搬运。

    arXiv cs.RO研究四足机器人具身智能运动控制

  3. 研究者提出 WorldFailBench 基准,用于检验世界模型能否忠实模拟机器人策略的失败方式,包含失败原因、失败阶段、失败边界三项评估任务。基准覆盖 LIBERO 与 RoboTwin 仿真环境中的操作任务,以及 G1 人形机器人在真实世界执行的操作任务。对七个世界模型的实验显示,这些模型在理解策略失败方面存在显著差距。

    arXiv cs.RO研究人形机器人具身智能仿真与数字孪生

  4. 一篇综述统计了113种基于学习的灵巧手操作方法,发现该领域已基本收敛到同一范式:在GPU仿真器中基于特权状态做强化学习,再蒸馏为仅依赖视觉的学生策略迁移到硬件;近一半语料采用该路线,且几乎全部集中在一个仿真器中,其后续版本鲜少被使用。另一条增长更快的分支从遥操作演示学习,采用视觉-语言-动作模型、扩散策略,或贡献在于采集装置本身的系统。已发表工作自2022年以来增长两倍,抓取为最大任务类别,双臂协调增长最快,几乎所有实验集中在四种手上。综述还指出,八种可购买或按公开设计制造的手未出现在任何方法论文中。

    arXiv cs.RO研究具身智能灵巧手强化学习

  5. 论文提出多约束灵巧策略优化方法MDPO,将灵巧操作建模为同时包含累积代价约束与逐状态代价约束的多约束策略优化问题,并把多约束投影集成进策略优化过程:用约束特定的策略投影,把最大化任务性能的中间策略映射到两类约束定义的可行域。在ReDMan平台的关节安全控制、手指安全与抓取任务实验中,MDPO相比基线约束满足更优,任务性能保持竞争力,代码已公开。

    arXiv cs.RO研究具身智能灵巧手运动控制

  6. 研究提出一种面向人形机器人任务策略的运行时监控框架,用于在不可恢复跌倒发生前及时触发回退。该方法将监控器合成表述为学习给定回退策略的随机有限时域可恢复性包络,并把数据探索重构为到达-规避问题,由不确定性引导的探索器系统发现未见状态、避开确信不可恢复区域。框架在价值学习与主动探索之间迭代,结合时间差分与蒙特卡洛目标提升分布内价值预测与不确定性估计,并将高不确定性区域显式视为不可恢复以抑制分布外乐观幻觉。在随机基准和29自由度Unitree G1人形机器人上评估,监控覆盖率和准确性大幅提升,并实现零样本迁移到真实硬件。

    arXiv cs.RO研究人形机器人运动控制强化学习

  7. MOTIO 系统将人类动作视频、3D 资产、运动参考与可复用技能转化为人形机器人移动操作程序,通过上下文任务与接触推理构建分阶段交互,并借助物理执行、多帧反馈和人工验证迭代,无需任务特定遥操作或机器人演示采集。33 次带时间戳的首次批准中,智能体轮次时间中位数 97.0 分钟,请求到批准时长 2.80 小时。在扫描办公室中,G1 完成连续 101.75 秒的瓶子处理物理执行;物理细化使拧螺丝螺纹残差降低 76.0%。智能体生成的技能还用于监督 BC/DAgger 蒸馏至共享参考策略,同一检查点完成 18 个仿真任务,无需推理时专家干预。

    arXiv cs.RO研究人形机器人具身智能运动控制

  8. 论文提出自研轮足双足机器人 RAIWAY,采用 20 英寸大轮径,并配套接触信息驱动的滚动运动控制方法,面向不规则、不连续地形。该方法在仿真中把多接触事件蒸馏为潜在表示,部署时仅靠本体感知在线推断,无需接触传感器。实机实验中,系统通过陡坡、砾石地、钉状表面与岩石地形,并在户外楼梯上连续爬升,台阶高度最高 15 cm;在室内外挑战场景中,其表现优于不含接触信息机制的基线控制器。

    arXiv cs.RO研究人形机器人运动控制强化学习

  9. 研究团队在 Habitat 3.0 中构建 TouchSafeBench 基准,包含 2,940 个模拟室内共处片段,覆盖社交导航与社交重排,配有同步多视角 RGB-D、俯视轨迹图、标定相机元数据及仿真器接触标签,用于评估视觉语言模型的碰撞接地能力。测试三个前沿或机器人学导向 VLM 与九种视觉表示,最佳平均 Macro-F1 低于 50%,显式深度未自动转化为机器人本体碰撞证据,机器人与场景接触的判断持续难于与人接触风险。

    arXiv cs.RO研究具身智能多模态安全与伦理

  10. 研究团队发布 ContactBench 1.0 富接触操作基准,基于对日常人类操作的观察归纳出八项基本技能,用 36 个参考任务和 40 多个物体资产实例化。资产可在消费级 3D 打印机上可复现制造,每个资产配有匹配仿真模型,并支持真实与仿真环境中的受控任务变体以评估泛化。在六个任务上评估近期纯视觉与视觉-触觉策略学习方法:纯视觉策略难以感知或响应接触事件,视觉-触觉策略也未带来显著性能提升。基准将在项目页开源。

    arXiv cs.RO研究具身智能仿真与数字孪生数据集

  11. 研究团队在 Shadow Dexterous Hand Lite 上仅用本体感觉和二值触觉反馈(无视觉)完成保定球旋转的零样本仿真到现实迁移,单次连续试验实现 225 次连续 180° 旋转(112.5 整圈),速度约 0.36 转/秒。方法包括传感器对齐的耦合感知仿真具身建模、触觉校准,以及压摆率动作限制和 STuck-AT Taxels 两种回合级域随机化。论文还对比触觉与仅本体感觉的贡献,定位触觉信息最关键的手部区域,并称该结果为保定球操控在旋转次数与速度上的最强硬件报道。

    arXiv cs.RO研究具身智能灵巧手传感器

  12. 论文提出HGWM,将LLM生成的房间锚点先验与持久空间语义记忆结合,用于零样本物体导航:粗阶段以0-10分对候选朝向打视觉语义分,细阶段衡量观测物体、房间上下文与目标先验的符号兼容性,再经相位相关融合与LLM方向建议结合后选择局部动作。在HM3D v0.1上报告62.6% SR、31.5% SPL,WMNav为58.1%、31.2%;MP3D上为46.8%、17.9%,对比45.4%、17.2%;HM3D v0.2完整模型为74.4% SR、31.9% SPL。组件消融使SR下降0.9-2.3个百分点、SPL下降0.6-1.5点。作者称实现通过离线测试,但无逐回合重跑记录,评估仅限仿真。

    arXiv cs.RO研究具身智能大模型智能体

  13. arXiv 论文提出 ArtifactArena 开放式评测平台,要求模型完成物理落地的软硬件协同设计任务:设计功能完整的机器人,并在仿真竞技场中对战。评测覆盖零样本、验证器引导的迭代优化和开放式物理设计三种能力,分别依据文本描述、物理仿真器反馈和对战数据改进机器人制品;模型排名由制品间一对一锦标赛的 Elo 分决定。框架与锦标赛基础设施对外开放,供社区持续提交,以构建不会饱和的测试平台。

    arXiv cs.RO研究具身智能仿真与数字孪生大模型

  14. 研究团队提出 RMMBench 评测基准,将高层与低层具身任务整合进统一框架,构建含 70 个规范任务场景的“导航-操作”任务套件,覆盖从局部操作到长时程复合导航。该基准要求机器人在连续空间中理解语言指令并执行长时程任务,以弥补现有基准任务类型与评测指标有限的问题。结果显示,领先的视觉语言模型在移动操作任务的空间定位上仍存在明显不足,长时程交互中机器人空间感知能力有待增强。

    arXiv cs.RO研究具身智能仿真与数字孪生大模型

  15. 研究团队提出Embodied Agent Arena,在几何、空间推理、可供性、任务规划与操作五个维度评测十个VLM智能体,1000个案例由32个既有来源与自建GeoProbe基准(168案例,覆盖相机、运动、深度与尺度估计)组成。结果显示闭源权重模型在全部五个领域领先,开源权重VLM空间推理可用但规划与操作成功率明显更低。执行中智能体可达成早期子目标却失去物体控制、将动作绑定到错误接收区域或提前停止;代码修复能恢复执行但不完成任务,自我审查可能推翻正确判断。

    arXiv cs.RO研究具身智能大模型智能体

  16. 论文提出 WorldEcho 评估框架,用视觉完整性和 SE(3) 末端执行器轨迹对齐两项指标,在比专家演示更广的动作分布上检验动作条件世界模型是否真正遵循指令动作。诊断发现,经专家数据训练的模型在演示动作上表现较好,但在非专家轨迹上会生成与指令动作不一致的运动或视觉上无效的推演。为此作者提出 WorldSync,通过扩大动作覆盖、用 Action-Forcing Expert 将中间视频表示锚定到动作引发的机器人动力学、并在动作干预下对齐预测与真值变化。实验显示 WorldSync 降低了 RoboTwin 上的完整性门控误差,用于迭代策略改进时在仿真和真实机器人上成功率更高。

    arXiv cs.RO研究具身智能强化学习仿真与数字孪生

  17. 该论文提出 PartialBiGrasp 双臂抓取生成框架,直接以部分点云观测为输入,不依赖完整点云。模型通过卷积占用网络隐式学习几何特征,对可抓取性、无碰撞接触区域和物体厚度进行局部推理,生成满足力闭合约束的抓取对,再用基于采样的优化修正不完整几何带来的歧义。验证包括解析力闭合指标、大规模仿真实验,以及在含噪声部分点云的新物体上开展的真实机器人实验。

    arXiv cs.RO研究具身智能运动控制仿真与数字孪生

  18. 论文提出 Graph-as-Policy(GaP)多智能体编码框架,从模块化开放机器人技能库(MORSL)生成含感知、规划、控制节点的有向计算图,用于物体几何与位姿变化较大的“变异性自动化”(VA)任务。GaP 构建内部仿真环境,并行用不同图排练任务实例,迭代优化图结构与参数以提升成功率和吞吐量。作者在 8 个新开放 VA 基准(4 个仿真、4 个真实世界)上评估,称成功率显著优于基线,并公开代码与数据。

    arXiv cs.RO研究具身智能运动控制仿真与数字孪生

  19. 研究针对VLA模型在有限机器人演示数据上微调会破坏预训练语义结构、削弱泛化的问题,提出将动作表征锚定到语义流形,并分解为共享语义通道与私有通道,推理时全部丢弃、不改变部署模型。方法在仿真与真实世界基准、多种VLA骨干网络上验证,真实世界分布内任务最高提升18.7%,分布外泛化最高提升21.5%。

    arXiv cs.RO研究具身智能强化学习大模型