跳到主要内容
Evolvant
订阅

机器人行业洞察

行业消息

  1. 论文提出 CARE 框架,用轻量评论家模型监测本地执行器的执行可靠性,在不可靠时把控制权升级给更强的云端模型,并在升级后保持控制直至智能体恢复,避免逐步切换;共享交接记忆跨执行器维护执行上下文与任务级进度,使模型介入时无需从头开始。在多个具身基准上,CARE 的任务成功率比最强协作基线高 6.3-18.3 个百分点,接近或超过纯云端方案,同时将动作间隔中位延迟降低 28.8-82.6%。

    arXiv cs.RO研究具身智能大模型智能体

  2. 论文提出时空重定向(STR)方法,利用视觉语言模型选择相关运动信号与身体部位,并据此识别关键帧,为关键帧分配更多求解器迭代、为选定部位赋予更高交互权重,以替代统一的逐帧迭代预算。同时引入力学感知接触锚定(MCA),用近似物体力旋量模型细化物体表面接触位置。在此基础上开发时空强化学习(STRL),结合自适应关键阶段采样与基于目标接近度和接触力的奖励。在Unitree G1仿真和Unitree R1真机实验中,STR以更低计算成本提升了几何接触覆盖率与连续性,并改善了下游物体交互任务的完成度。

    arXiv cs.RO研究人形机器人具身智能运动控制

  3. 研究提出Alpha框架,在仿真中对LLM驱动机器人操作按感知(传感器延迟)、驱动(抓取滑移)、运动学(不可达目标)、规划(规划器输出损坏)四类注入校准故障。在150回合配对矩阵中,Llama-3智能体成功率44.0%(33/75),确定性脚本Oracle为64.0%(48/75),McNemar p=3.01×10^-4;剔除规划器输出损坏后两者均为55.0%(33/60),不一致对数为零(p=1.00)。作者据此认为性能差距全部来自提示词到JSON的序列化与验证接口,而非认知推理缺陷,并审计了169次历史试点。

    arXiv cs.RO研究具身智能仿真与数字孪生大模型

  4. 该论文综述基于触觉的机器人操作研究,将其划分为力学驱动与数据驱动两条互补路径:前者通过接触力学和任务特定推理显式解读触觉信号,形成与操作相关的状态表征并影响机器人动作;后者直接从数据学习触觉表征与操作策略,涵盖模仿学习、强化学习、视觉-语言-动作模型和预测模型。文章先介绍触觉传感基础,再分别回顾两条路径的进展,最后讨论面向可扩展、可泛化、稳健的触觉使能机器人系统的开放挑战与未来机遇。

    arXiv cs.RO研究灵巧手传感器强化学习

  5. 论文提出 FRED 框架,通过自蒸馏让世界动作模型(WAM)在单步去噪中从噪声预测未来视频表征,并以真实未来观测提取的表征为目标,同时以历史观测作为时间上下文条件。在多种真实世界操作场景中,FRED 持续优于同类 WAM,在零样本环境泛化的长时程与域外任务上提升明显;在仅有人类视频演示、无机器人训练数据的任务上成功率达 50.0%,最佳对比方法为 19.4%。

    arXiv cs.RO研究具身智能强化学习大模型

  6. 论文研究用于人形机器人运动的 Multi-PBRS(多势函数奖励塑形),并提出统一奖励配置,在九台人形机器人上使用相同奖励结构与权重进行验证,仅需关节/连杆映射和默认姿态等机器人特定元数据,无需逐台重新设计奖励。实验称相比标准塑形,MPBRS 在不同机器人间缩放行为更一致、调优敏感性更低,且不改变最优策略。

    arXiv cs.RO研究人形机器人运动控制强化学习

  7. arXiv 2610.25600v2 提出向量量化世界模型(VQ-WM),将离散隐状态搜索与连续视觉反馈控制结合用于机器人长程操作规划:离散隐预测器建模向量量化隐状态转移以寻找最短路径,学习控制器通过视觉反馈依次到达规划状态并纠正偏差。方法以首达时间估计器替代欧氏距离作为准度量,使规划抽象与控制器能力对齐。在实体机器人汉诺塔任务上,仅用短时演示数据即达到100%成功率,而VLA、WAM等基础模型仅在训练数据含解轨迹时成功;在涵盖操作与运动的仿真基准上比最强世界模型高13.3至85.3个百分点。

    arXiv cs.RO研究具身智能运动控制强化学习

  8. 论文提出仅用RGB-D相机的低成本自主框架TrackDeform3D,用于采集可变形物体的3D关键点数据:方法识别3D关键点并跟踪其轨迹,引入运动一致性约束生成时间平滑、几何一致的数据。在多种物体类别上与多个先进跟踪方法对比,几何与跟踪精度均有一致提升。基于该框架发布的数据集包含6个可变形物体、总计110分钟轨迹数据。

    arXiv cs.RO研究具身智能传感器数据集

  9. 论文发现VLA动作生成与图像/视频生成差异显著:仅将训练时间步分布偏向噪声端点,即可在LIBERO、LIBERO-Plus、LIBERO-Pro及真实机器人任务上获得强单步策略;对多种架构的开源VLA模型,用单次前向替代迭代解码,在LIBERO、CALVIN、SimplerEnv等基准上常与原多步解码相当。作者用标准Flow Matching的不可约速度损失R_v(t,c)解释:VLA在噪声端点处该损失更小,而图像生成模型多呈U形;学习到的生成映射对初始噪声的雅可比最大奇异值在动作生成中明显更小。作者认为VLA的条件-目标结构更接近图像到文本,使单步生成更易实现,代码与训练配置已开源。

    arXiv cs.RO研究具身智能大模型多模态

  10. arXiv:2506.21697v2 提出随机神经控制屏障函数(SNCBF)的可验证安全合成方法,覆盖激活函数二阶可微的光滑 SNCBF 与使用 ReLU 激活的 SNCBF 两类情形。方法包含两个框架:面向光滑 SNCBF 的免验证合成框架,以及同时适用于光滑与 ReLU SNCBF 的验证在环合成框架。作者在倒立摆、Darboux 和独轮车模型三个案例中验证了所提框架。

    arXiv cs.RO研究运动控制安全与伦理学术论文

  11. 研究提出 Cartender 方法,从真实驾驶记录中构建反事实分支:由视觉语言模型提出替代未来及对应选择指令,不受支持的指令作为负标签,无需模拟器。方法学习场景-语言兼容性分数调节轨迹生成,并用奖励训练的语言残差对候选重排序。在 WOD-E2E 上,3,603 个可行指令条件下最佳提案 RFS 为 8.642;8,974 个被接受提案平均 RFS 8.203,高于匹配记录轨迹的 7.906,67% 提案得分超过记录对应项。同场景配对指令成功率从 23.67% 升至 57.00%,RFS 从 6.32 升至 7.10,不可行指令执行率从 53.36% 降至 14.18%。

    arXiv cs.RO研究大模型多模态自动驾驶

  12. 论文提出 PaceVLA 框架,用于解决 VLA 模型因从遥操作演示学习细粒度时间模式、需大量底层动作步而导致的执行时间效率低问题。该框架包含两个耦合组件:基于共享动作专家的模式特定动作解码器,支持多种时间粒度与预测时域;以及可量化性引导的模式选择方案和上下文条件路由器,在每个推理步判断粗粒度执行是否合适并选择执行模式。在三个多任务仿真基准和六个真实世界任务上,PaceVLA 在多种具身形态(含长时程与灵巧操作)中提升执行效率并保持任务成功率。

    arXiv cs.RO研究具身智能灵巧手大模型

  13. 论文提出积分自监督方案:用短视教师在每个短窗口独立对IMU积分,从零训练惯性里程计模型,学生虽仅受短窗口速度变化监督,却学会直接预测速度且精度超过教师;再用位姿图蒸馏以多窗口位姿图的序列一致目标精炼模型。该方法在新平台部署时无需采集真值轨迹,只需标定IMU并在正常运行中记录数据。在行人、无人机、四足和人形共六个数据集上,无速度或位置标签训练的模型平均速度误差与同架构有监督基线相差0.07 m/s以内。

    arXiv cs.RO研究人形机器人四足机器人传感器

  14. 研究提出FoveaVLA,用学习到的注视动作替代VLA中的腕部相机:策略在每个动作块之外预测下一次查询需观察的交互区域,并从原始分辨率图像中裁剪该区域,与完整视图一并输入。模型基于π0.5构建Single与Dual两种配置(分别使用一个或两个外部立体相机,输入完整与注视区域的RGB-D),在DROID数据集结合RoboInter交互标注上后训练。四个真实任务套件中,FoveaVLA-Single单外部RGB-D视图成功率70.8%,Dual为77.1%,配备腕部相机的π0.5为52.1%;在普通抓取放置任务上与基线持平,在存在干扰物、布料操作和远距离物体任务上成功率提升。

    arXiv cs.RO研究具身智能大模型多模态

  15. 研究提出集体经验学习(CEL)范式:已部署机器人汇集自身执行经验,用于更新共享策略并回传车队,无需额外专家演示或纠正动作。其实现方式为失败引导的经验检索微调(FERT),并配套容错异步训练系统(FATS)协调机器人执行、云端推理与策略优化。在五个真实操作任务上,策略成功率达 93.3%–99.2%(每任务 120 次试验,评估机器人未参与训练数据采集);多阶段手机包装任务中,96 台机器人将成功率从 79.2% 提升至 98.3%。

    arXiv cs.RO研究具身智能运动控制强化学习

  16. 研究团队发布 HumanVerse 数据集,包含 500 小时开源世界人类移动操作数据,将第一人称视频与同步的身体和手部运动配对。其人类到人形机器人流程对齐相机视角与手臂外观,并离线优化运动参考和控制器输入以降低末端执行器误差。该流程在宇树 G1 上完成零样本迁移验证,无需目标任务的机器人演示。基于此训练的全身移动操作基础模型 λ₀ 在 SIMPLE 上成功率达 90.0%,真实世界移动操作任务平均成功率 62.5%。

    arXiv cs.RO研究人形机器人具身智能运动控制

  17. arXiv 发布 WorldOracle 基准(编号 2610.18826v3),用于将动作条件世界模型(ACWM)与成对的真实世界执行进行对比:给定相同初始观测和低层动作序列,检验预测 rollout 是否复现真实物理后果与任务状态转移。评估含物理状态正确性、交互空间对齐、关键交互区域保真度、多视角动作一致性四个维度,配套覆盖不同交互动态与具身形态的真实世界训练/评估套件,情节为长时多段且包含成功与失败执行。在七个代表性 ACWM 上的实验显示各模型优势与失败模式存在差异,数据集、评估代码与排行榜已公开。

    arXiv cs.RO研究具身智能仿真与数字孪生数据集

  18. 研究团队发布RoboCap,一顶重250克、搭载6个摄像头和双IMU的帽子,用于在真实环境中采集第一人称操作数据,并配套推出与设备无关的3D算法套件Grounded API。报告称,硬件、标定与3D算法协同后,其SLAM在多种场景与设备配置下、深度估计在第一人称场景下、手部追踪在适配第三方设备时,均在公开基准上达到当前最优性能。

    arXiv cs.RO研究具身智能传感器数据集

  19. 研究团队提出用柔性Fin Ray夹爪的形变做视觉力预测,替代部署阶段的力/触觉传感器。方法分两步:先在校准数据上训练视觉力估计器,为任务演示标注力估计值;再在增强力的演示上训练动作—力提议策略,联合生成候选动作及其预期力。测试时采样候选动作与预测力,执行预测力最接近演示目标力的动作。在浆果采摘、空罐抓取、手内重定向和插头插入四项任务上完成评估。

    arXiv cs.RO研究具身智能灵巧手传感器