跳到主要内容
Evolvant
订阅

机器人行业洞察

行业消息

  1. 该论文提出「反馈世界模型」:在推理阶段维护一个在线更新的轻量级反馈状态,利用机器人每步执行后观测到的真实下一状态修正未来预测,无需额外训练数据或参数更新。作者将其解释为潜空间观测器,并在有界、渐近收敛的动力学残差与稳定反馈增益下给出收敛保证;同时引入动作感知引导,强调动作可控分量。在 LIBERO-Plus、Robomimic 及真实操作任务上,该方法将世界模型预测误差最高降低 76.4%,并可在不更新参数的情况下改进预训练基础模型 Fast-WAM-Joint 的预测。

    arXiv cs.RO研究具身智能运动控制强化学习

  2. 论文提出ExtremControl全身控制框架,将人形机器人遥操作端到端延迟从现有方法约200ms降至最低50ms。作者将仅使用位置的PD控制认定为延迟下限的根本原因,在底层控制中加入缩放速度前馈,使跟踪延迟减少约70ms,并给出可证明最优的前馈比例;控制直接作用于所选刚性连杆(主要是机器人末端)的SE(3)位姿,避免控制回路中的关节空间重定向,并推导出只需一次拟人化标定的闭式笛卡尔空间映射以适配不同体型操作者。系统支持光学动捕与VR追踪,在仿真和真机上验证了速度前馈在强化学习运动控制中的有效性,并演示了乒乓球平衡、杂耍和实时回球等反应性任务。

    arXiv cs.RO研究人形机器人具身智能运动控制

  3. 研究提出专家引导强化学习(EGRL)训练策略:将强化学习仅作为优化工具,用基于专家日志数据的轨迹距离奖励引导闭环模仿学习。受控实验显示,性能提升的很大一部分来自训练过程而非模型规模与复杂度。据此构建的轻量级 MLP 策略 DriveMLP 在 nuPlan Val14 Reactive 基准上得分 86.51,较此前最佳模仿学习规划器 Flow Planner 提升 3.2 分,推理速度提升超过 15 倍,代码已在 GitHub 开源。

    arXiv cs.RO研究运动控制强化学习自动驾驶

  4. 论文提出 AtomicRL,一个面向 VLA 策略的强化学习后训练框架,用原子任务结构做信用分配与自适应探索:语义感知策略优化(SAPO)用语义门控阻止失败原子子任务的 TD 残差跨任务边界传播,瓶颈自适应目标探索(BATE)按各原子子任务掌握度动态调整任务采样与局部探索激励。配套 Real2Sim2Real 流水线衔接仿真在线 RL 与真机部署。在 LIBERO-LONG 上,两种 VLA 架构相对 PPO 绝对提升 3.6% 和 4.0%;CALVIN ABC-D 全任务性能最高提升 9.5%;结合真机流水线后真实任务性能平均提升 21.3%。

    arXiv cs.RO研究具身智能强化学习仿真与数字孪生

  5. 该论文提出 ASTEROID 学生-教师监督学习框架,用于在部分可观测条件下学习测试时探索行为。学生先在部分可观测环境中采集在线策略上下文,特权专家再基于该上下文给出动作标签,学生通过蒸馏这些标签学会在不确定时搜索、在隐状态揭示后利用。在 11 个环境(含离散探索基准、机器人操作、导航、Procgen)中,固定探索预算下回报约为基线 2 倍,交互次数比强化学习基线少约 100 倍;方法还将仿真策略迁移到无视觉的真实机器人操作,成功率比标准蒸馏提升 40%。

    arXiv cs.RO研究具身智能运动控制强化学习

  6. 研究在仿真宇树 G1 上以同一训练方案训练 12 个策略,改变重力、地形几何与地面接触模型(刚性或 3D RFT),并加入地球到月球微调与重力随机化。结果显示重力迁移不对称:地球训练策略在月球平坦刚性地面存活率 0.64–0.75,月球训练及微调策略无法在地球站立,已发布的通用控制器 SONIC 在月球存活率最高 0.10。崎岖地形训练把组合瓦片存活率从地球 0.53 提升到 0.98、月球 0.80 提升到 0.99;在更硬的月球土壤上土壤训练收益有限。作者称月球结果为依赖接触模型与土壤刚度的仿真预测。

    arXiv cs.RO研究人形机器人运动控制强化学习

  7. 研究团队提出 RISE 方法,让人形机器人在推理阶段按任务目标引导跌倒后的起身方式,而非仅追求可靠站起。该方法学习一个由感官反馈连接意图运动与电机动作的恢复词汇表,并用视觉扩散规划器从词汇表执行数据中预测未来身体状态作为运动意图,再由任务代价将预测导向期望朝向、起身速度或路径,生成条件化运动潜变量。仿真实验显示多样化恢复、地形适应与无需重训练的测试时引导,并在宇树 G1 上完成真实世界演示。

    arXiv cs.RO研究人形机器人具身智能运动控制

  8. DONIC 是首个跨操作类别与人体运动来源联合训练的通用双臂灵巧跟踪器,配套发布 BiHOI 多视角数据集,含 1,575 条序列、覆盖 229 个物体,重建交互被重定向为机器人参考。方法将近端策略优化与行为克隆置于反馈循环中,把验证成功的执行回收为训练演示,并以物体为中心的每手奖励和 Clip-Centered Advantages 支持单一策略跨异构参考学习。无需微调,单个检查点在训练物体未见轨迹上成功率 86.79%,留出物体上 57.32%,分别超过最先进双臂跟踪基线 77.36 和 45.73 个百分点。

    arXiv cs.RO研究具身智能灵巧手运动控制

  9. 论文提出RangeNav,一个仅183k参数的激光雷达距离图像编码器,完全在合成数据上预训练,采用各向异性卷积与循环填充处理距离图像的极端长宽比和方位角接缝。预训练目标结合距离重建、语义分割与鸟瞰图(BEV)预测,随后冻结编码器用于强化学习策略。仿真中,加入语义与BEV监督相比仅重建基线,在程序生成训练环境和分布外真实测试环境成功率分别平均提升32.03和23.73个百分点。在Unitree B2-W四足机器人上零样本部署,可在密集人群、低光与施工区域导航。代码与模型将开源。

    arXiv cs.RO研究四足机器人具身智能传感器

  10. 一篇arXiv新论文(arXiv:2610.29677v1)将递归自我改进(RSI)概念引入机器人学习,梳理从提升机器人能力到改进能力生成过程的路径。作者指出,物理世界的RSI需通过代价高昂的试错从部分观测中学习,并应对运行条件变化与不可逆后果;收益延续需满足四个条件:反馈针对剩余学习需求、接收组件能利用该变化、价值在任务或硬件变化后仍成立、持续实践安全可负担。现有研究集中于操作任务,已支持行为改进、对后续学习的助益与过程改进,但尚无物理研究分离出可归因于递归的收益。

    arXiv cs.RO研究具身智能强化学习大模型

  11. 研究提出一种轻量落脚点预测模型(FPM),仅用本体感觉和速度指令预测未来落脚点,并只在预测落脚点周围的小块区域采样高程图,从而在策略输入前剔除冗余地形信息。FPM 与行走策略联合训练,并随步态成熟定期用新 rollout 重训。该方法达到给定地形难度所需训练迭代约为使用完整高程图的 1/3,在落脚点稀疏的狭窄围墙走廊和未见地形上优于完整高程图策略,性能与数倍成本训练的注意力编码器相当。策略零样本迁移至 Unitree G1 人形机器人,在室内外穿越障碍、楼梯、间隙和下行台阶。

    arXiv cs.RO研究人形机器人具身智能运动控制

  12. 该研究提出一种多阶段强化学习方法,为月球重力下按指令点对点跳跃生成单一端到端控制策略,策略架构简单且仅依赖任务兼容的机载传感。仿真中着陆误差小于机器人自身尺寸;研究还分析了跳跃的力矩与功率需求,并测试了飞行中控制更新冻结最长1秒等极端异常下的性能退化。硬件迁移实验显示,策略可在月球重力卸载条件下完成垂直跳跃,实测力矩与功率曲线与仿真一致并处于硬件限制内。

    arXiv cs.RO研究四足机器人运动控制强化学习

  13. 该论文提出将欧氏距离场(EDF)直接纳入强化学习观测空间的框架,为智能体提供连续几何线索以支撑稳定、响应式的避障行为,并借此简化奖励设计,在有人工势场引导和无引导两种情况下均能有效避障。方法在7自由度冗余机械臂上验证,实现从仿真到真实硬件的零样本迁移;策略仅用随机化静态物体训练,却能泛化到未见过的真实环境,并对动态障碍物表现出鲁棒的在线避障能力。

    arXiv cs.RO研究工业机器人运动控制强化学习

  14. 针对世界动作模型(WAM)的视频与动作目标未显式约束三维几何、而逐点对齐三维基础模型特征又会过度约束紧凑动作特征的问题,论文提出关系几何强制(RGF):从冻结的三维基础模型迁移几何先验,对齐成对特征关系而非逐点特征。RGF 包含帧内、跨视角、动作-时间三个互补关系目标,仅在训练阶段使用,无需显式几何分支或额外推理模块。仿真与真实世界实验显示,在多种操作场景和 WAM 范式下均取得一致增益。

    arXiv cs.RO研究具身智能强化学习大模型

  15. 该论文提出DepState-JEPA,一种基于V-JEPA 2.1的双流RGB-深度联合嵌入预测架构,通过共享潜在状态DepState将空间理解与动作条件预测连接。深度既作为互补观测流,也用于将两种模态锚定在度量三维空间中;射线条件读出无需目标深度即可预测局部特征,动作条件转移后同一解码器预测未来RGB与深度特征。机器人状态读出提供递归本体感受输入,物体轨迹监督与校准正向运动学通过运动目标和关节-TCP一致性塑造状态学习。对比显示RGB-D适配后RGB编码器迁移、特征补全、条件视觉预测和操作成功率均有提升,消融实验识别出深度内容、度量坐标、未来状态匹配的贡献及FK正则化的额外控制增益。

    arXiv cs.RO研究具身智能强化学习大模型

  16. 论文提出TIDE(Training In DEployment)人在环在线后训练系统,用来源条件监督学习框架从部署期间的人类干预和策略rollout中在线更新策略,不需要学习critic、奖励模型或动作评分器。在四个真实双臂操作任务上,TIDE在里程碑归一化任务进度和全任务完成率上超过热启动策略及匹配的额外离线演示,与固定策略采集基线相当,且部署期间即可提供更新检查点。每个任务的后训练会话从rollout开始到最终检查点可用不到一小时,学习与检查点处理异步进行。

    arXiv cs.RO研究具身智能运动控制强化学习

  17. 研究提出SimPT仿真框架,将策略推演、纠正数据采集、策略训练与独立评估整合,实现基于干预的VLA后训练自动化。其Agent-Compiled Progress Graph利用仿真器特权状态跟踪任务进度并保留稳定快照,失败后由CuRobo专家从快照尝试恢复,使恢复尝试次数较固定间隔基线减少75.0%,恢复成功率从93.4%升至98.9%。在七个RoboTwin操作任务上比较RECAP、HG-DAgger、DPO+SFT、FlowPRO四种方法;改进版RECAP-CF-LPF在留出仿真试验中把成功率从76.50%提升至79.36%,在真实机器人以太网线插入任务25个场景中从72%提升至96%。

    arXiv cs.RO研究具身智能强化学习仿真与数字孪生

  18. 论文提出 SMR,一种从语义条件物理专家中学习的流式神经运动重定向器,用于将人类运动迁移到人形机器人。方法先把人类运动转换为机器人任务空间中的身体关键点位置、朝向与速度目标,由物理专家在仿真中于接触、动力学和执行器约束下跟踪;再在专家执行的状态轨迹上训练严格因果的 Transformer,每帧仅用当前与过去的人类观测生成运动参考,交给下游全身控制器。实验称语义条件物理专家在语义保真度与物理有效性上优于直接优化式重定向,流式重定向器在相同全身控制器下闭环性能优于运动学与物理修正基线。

    arXiv cs.RO研究人形机器人运动控制强化学习

  19. 研究团队提出 HyperDrone 四旋翼仿真器,称其批量渲染速度比现有最先进的批量四旋翼仿真器快 20 倍以上。该仿真器将优化的多旋翼动力学与自研光线追踪引擎 HyperLux 结合,支持 Nvidia OptiX、Vulkan、Apple Metal 和 WebGPU 后端,动力学与渲染均完全在 GPU 上运行。HyperLux 可渲染 RGB、深度、语义/实例分割、表面法线与光流,并支持反射、PBR、运动模糊等效果,在消费级 GPU 上最高保真度下达到每秒数百万帧。团队在仿真中纯训练基于视觉的偏航控制策略,并迁移到搭载摄像头的 Crazyflie 小型四旋翼上完全机载运行。

    arXiv cs.RO研究强化学习仿真与数字孪生无人机

  20. 论文提出开源 GPU 加速图库 GGraph,同时面向真实机器人部署与大规模强化学习训练。GGraph 通过 ROS 2 接口支持真实机器人,并支持 GPU 向量化策略训练,内置三维导航、探索和回环闭合集成等任务。单机器人运行时图更新为毫秒级;大规模场景下可支持数百个并行机器人训练基于图的探索策略,实际训练时间缩短一个数量级。

    arXiv cs.RO研究运动控制强化学习仿真与数字孪生