跳到主要内容
Evolvant
订阅

机器人行业洞察

行业消息

  1. Kamino 是一个基于 GPU 的物理求解器,用 Python 基于 NVIDIA Warp 实现并集成进 Newton 框架,面向异构、强耦合机械系统的大规模并行仿真。它原生支持运动学闭环,无需把系统拓扑近似为运动学树再加闭环约束或 mimic 关节;核心是基于 ADMM 的约束优化算法,将约束刚体多体正向动力学转写为非线性互补问题求解约束力,从而在不简化或凸化接触模型的情况下解析接触动力学。作者在含六个嵌套运动学闭环的双足机器人上训练强化学习策略,单块 GPU 并行仿真 4,096 个环境,得到可行行走策略。

    arXiv cs.RO研究人形机器人运动控制强化学习

  2. 英伟达PAR实验室提出JCA模型,为任意骨架同时生成视频与可回放的3D运动,并生成将运动配准到场景的相机。方法上把3D运动放在支持任意骨架的独立模型中,通过少量交叉注意力层连接预训练视频模型,使运动模型可先用纯运动数据学习;模型还学习在视频帧中定位关节以恢复相机。训练数据由生成式视频编辑器把动画3D资产放入匹配场景构建,结合人类与机器人视频共近20万训练对。评估称其从文本驱动多样骨架的保真度优于视频优先流水线,并支持视频与骨架运动互转及关键帧控制。

    arXiv cs.RO研究仿真与数字孪生大模型多模态

  3. arXiv 发布编号 2610.27045v1 的交叉领域专著,试图为物理AI给出统一定义:在现实约束下通过持续反馈感知、建模并作用于物理世界的人工系统,并将其与数字AI、具身AI、信息物理系统、数字孪生区分。专著梳理多模态感知、物理数据与仿真、世界模型、具身基础模型、运动控制、多智能体协同、软硬件协同设计等方法,覆盖机器人、制造、基础设施、科学实验与自主服务应用,重点讨论sim-to-real迁移、可靠性、实时执行、评估、安全与治理,并提出从狭窄自动化走向Physical AGI的研究方向。

    arXiv cs.RO研究具身智能仿真与数字孪生大模型

  4. 提出 AdaDex 目标条件强化学习框架,将一段数秒的单手-物体轨迹(动捕数据或从野外 RGB(D) 视频重建的 HOI)转化为可适应灵巧技能。核心方法为混合灵巧模仿:共享策略同时在两类大规模并行环境上训练,一类用稠密运动跟踪目标注入人类先验,另一类用带噪声初始状态与目标及稀疏物体成功奖励迫使技能偏离参考。所得策略可完成功能性抓取、物体重摆、带手指步态的手内重定向及抛接等动态行为,在泛化性与功能性上优于基线,并实现跨仿真器迁移与真机迁移。

    arXiv cs.RO研究具身智能灵巧手运动控制

  5. PhysCanvas 是一个状态一致的视觉-触觉世界模型,将多视角 RGB、触觉图像、标记位移、任务状态与动作统一到同一视觉空间,共享视频 VAE 与预训练生成主干。其一致性感知后训练使用冻结的场景、模态与状态奖励模型进行监督。在四个真实操作任务中,世界模型推演与真实成功率的任务级皮尔逊相关系数均值由 0.602 升至 0.885;在奖励引导世界模型中后训练使 π0.5 真实成功率从 59.1% 的 SFT 基线提升至 70.8%。

    arXiv cs.RO研究具身智能强化学习仿真与数字孪生

  6. SceneRig 是一个智能体系统,可将单张图像转化为可编辑、可直接用于仿真的三维场景。它结合几何、视觉和物理工具重建三维场景,再由智能体在物理仿真器内执行编辑-验证循环,以实现物理稳定性。在多样化输入下,该系统改进了实例分割、以物体为中心的外观和三维放置,同时保持场景物理稳定;其场景比基线方法更准确地预测真实机器人策略结果,并更可靠地支持回放已记录的操作,而无需轨迹适配。

    arXiv cs.RO研究具身智能强化学习仿真与数字孪生

  7. SuperMimic 提出用一个可微世界模型摊销人形机器人全身运动跟踪的学习成本,该世界模型由标准刚体仿真器的转移数据拟合,并与跟踪策略在同一循环中联合训练,通过短时想象 rollout 的时间反向传播提供解析梯度。在单块 GPU 上训练 3 小时,其回报超过在 128 块 GPU 上训练 7 天的当前最优基线,GPU 小时数减少超过 1000 倍;在 129,514 个基准运动上失败 25 个,基线失败 179 个。两块 GPU 训练 9.8 小时后实现零失败,策略可迁移到实体 Unitree G1 完成多样高难度动作。

    arXiv cs.RO研究人形机器人运动控制强化学习

  8. 研究团队提出 FRDV 框架,将人体运动捕捉数据重定向到不同人形机器人:运动学阶段结合自定义序列二次规划求解器、实时迭代与分块并行处理,最高达每秒 9,156 帧,比 GMR 和 ProtoMotions 快约 136 倍,并在优化中加入机器人特定约束以减少地面穿透与自碰撞。对需进一步验证的动作,用接触隐式 iLQR 控制器在完整刚体动力学下检验,识别动力学不可行动作并修正脚部悬空、打滑。团队用多条现有流水线训练运动跟踪强化学习策略,比较跟踪保真度与成功率,并在宇树 G1 人形机器人上完成 sim-to-real 迁移。

    arXiv cs.RO研究人形机器人运动控制强化学习

  9. 该论文提出一种包裹机器人通信链路的算法:当机器人要用入站链路数据更新状态时,算法用 Safe Anytime-Valid Inference 检验各机器人异常检测器输出的信任值流,筛出可安全采纳的可信链路子集,仅要求检测器优于随机猜测。该封装同时给出两项统计保证:以用户选定的高概率在所有时间上均匀排除全部被攻破链路,同时快速学会信任合法链路,且无需对连通结构或被攻破链路数量作限制性假设。作者在 3 台 LoCoBot 上做神经隐式建图、8 台 GoPiGo 上做航向一致性实验,并用硬件采样的信任值仿真验证可扩展至数百台机器人集群。

    arXiv cs.RO研究运动控制仿真与数字孪生安全与伦理

  10. 研究团队提出 RoboCasa-Shift,一个基于 RoboCasa365 的诊断性鲁棒性基准,采用受控单因素偏移、共享底层设置的干净-扰动配对 rollout 和仿真器阶段感知诊断。在四个长时程家庭操作任务、四种扰动因素与三个校准严重度下评估 GR00T N1.5,共完成 1,040 次正式 rollout。结果显示鲁棒性响应随因素和任务差异显著,严重度提升不总带来单调退化:某相机条件下 80 个配对回合中 8 个结果改变但 ΔSR=0;相机 L2 与高斯模糊 L1 的 ΔSR 同为 0.188,第一阶段失败率却分别为 19.0% 和 36.4%。代码已开源。

    arXiv cs.RO研究具身智能仿真与数字孪生大模型

  11. 该研究提出一种验证引导的训练框架,通过安全约束的概率枚举检测前向不变性违规,即学习到的证书错误地将不安全行为归类为安全的状态,从而生成比标准对抗攻击方法更精确刻画失败边界的紧凑反例集。用该表示微调预训练的 HJ 值函数,在所有测试基准上得到更大的认证区域并缩短认证时间。作者还基于精炼后的证书引入屏蔽机制,在 Isaac Sim 物理仿真和真实自动驾驶竞速实验中实现零安全约束违规,而标称控制器和基于 LQR 的备份策略均出现违规。

    arXiv cs.RO研究运动控制仿真与数字孪生自动驾驶

  12. 研究提出以智能体为中心、物理感知的框架,从NGSIM US-101、highD、exiD多源轨迹数据中发现跟驰法则,得到自适应均衡响应模型(AERM),将状态依赖的相对速度响应与间距依赖的均衡速度恢复相耦合。AERM具有解析的均衡速度-间距与流量-密度关系,并推导了零延迟形式的稳定性条件。在上海自然驾驶数据、NGSIM I-80和Waymo轨迹上对比七个经典跟驰模型,AERM在轨迹特定校准下间距RMSE分别降低9.11%、7.59%和21.73%,在数据集级共享参数下仍具竞争力。

    arXiv cs.RO研究仿真与数字孪生智能体自动驾驶

  13. 该论文提出 RLTrajGen-PPMPC-CBF 分层框架,用于自动驾驶车辆在环岛场景下的安全、平顺与舒适导航,以解决强化学习逐点决策与 MPC 轨迹级优化之间的结构性不匹配问题。框架采用预设性能约束(PPC)使参考轨迹与控制输出逐步稳定收敛,并通过控制屏障函数(CBF)层提供实时安全修正并反馈至 RL 过程。在 MetaDrive 仿真环境中,该方法相较最优基线将平均成功率提升 6.25%、运动病剂量值(MSDV)降低 65.87%,同时加快训练收敛。

    arXiv cs.RO研究运动控制强化学习仿真与数字孪生

  14. 论文指出,在成功的目标导向演示上训练的动作条件视频生成模型会忽略动作指令,原因在于训练数据的动作影响不足,并证明数据本身构成模型可表达动作影响的上界,专家演示的狭窄动作分布使该上界偏低。作者提出主动采集数据的 Action Influence Maximization(AIM)算法,在仿真导航与操作任务中与探索启发式、内在动机方法对比。在基于像素的操作任务中,AIM 是唯一持续提升可控性的方法:在 3k 条演示基础上新增 500 条主动采集回合,其末端执行器可控性即达到用 300k 条专家回合训练的世界模型水平,数据量减少 85 倍。

    arXiv cs.RO研究具身智能强化学习仿真与数字孪生

  15. DexGraspFlow 提出条件连杆级 SE(3) 流匹配框架,融合局部物体几何、连杆几何与运动学树距离导出的注意力偏置,用双流 DiT 建模连杆—连杆与连杆—物体交互,联合学习平移与旋转速度场并积分生成连杆位姿,再经逆运动学恢复关节构型。在三款机器人手、30 组物体—手部配对上,平均仿真成功率 95.33%,含逆运动学的平均生成延迟较当前最优基线低约 49%。模型对七种去指变体与掌心朝向引导实现零样本适应;针对部署手部训练的模型在 100 次真机抓取中成功率 91%。

    arXiv cs.RO研究具身智能灵巧手运动控制

  16. Isaac Lab 文档发布 Newton WebAssembly 仿真的浏览器交互演示包,包含预构建仿真、浏览器查看器与导出器源码,归档以提交命名并校验 SHA-256,作为永久包容器后续更新只增资产不新建编号发布。本地预览需下载归档后运行 python -m http.server 8000 --directory site 并访问 /interactive/;运行演示仅需浏览器,重建物理需固定版本 Newton Web 编译器与 Emscripten。发布流程复用 interactive-releases 分支,在官方仓库创建该分支需管理员按分支创建规则执行。

    IsaacLab releases研究仿真与数字孪生开源基准评测

  17. Isaac Lab 发布 v3.0.0 正式版,作为新项目及从 2.x 迁移的推荐基线。新版本提供跨多种物理、渲染与可视化后端的统一任务 API,支持基于 Newton 与 OV 库后端的无 Kit 执行和 Warp 原生数据通路。Newton 为 Warp 原生物理后端,含 MuJoCo-Warp、VBD、MPM 求解器路径,可支持刚体、可变形体与粒子;Isaac Sim 变为可选组件。版本适配 Isaac Sim 6.2、Python 3.12、PyTorch 2.11(CUDA 13.0)、Warp 1.17、Newton 1.6.1 与 RSL-RL 5.5.1。

    IsaacLab releases研究运动控制强化学习仿真与数字孪生