研究提出一种软物体世界模型,用在大规模仿真软物体交互数据上训练的 Transformer 主干网络,执行生成式全状态估计和以动作为条件的动力学预测,并采取措施缓解仿真到现实的差距。模型通过在可变长度部分点云历史上进行上下文学习来推断潜在形状与材料线索,无需权重更新即可泛化到不同机器人本体、材料参数、衣物类型与形状以及操作协同模式,并与目标条件动作规划器集成进行运动合成。作者在仿真和真实世界中针对双臂衣物折叠验证该方法,报告重建保真度、预测准确性和任务成功率均有提升。
机器人行业洞察
今日精选
The robotics journal行业消息
论文提出支撑感知抓取合成框架 IORA,面向低自由度耦合手在不规则物体上的固定任务。方法将手与物体局部表面区域建模为图并搜索运动学可行匹配,再细化腕部位姿与电机状态,经物理仿真推演验证抓取;可选的任务引导局部搜索在验证位姿附近调整腕部与电机状态并按任务条件选优。多物体实验显示生成多种抓取构型,抓取成功率高且抗扰动强,真实实验在烹饪场景中实现物体固定。
LocoManiLab 发布统一测试平台,覆盖数据采集与生成、策略训练、评估和物理部署。任务套件包含五个家庭场景类别下的 234 个原子与组合任务,配套 51.5 小时仿真遥操作数据。评估在共享控制器下测试十二种策略跨任务/场景划分与扰动水平的表现,并比较两种策略在五种控制器下的差异;成功率在未见任务与场景上下降,且随视觉扰动增强而普遍降低。三个仿真移动操作任务与真实设置高度匹配,三种策略在仿真与真实域中的排名相似。
该研究提出 ProTrav 概率地形表示方法:先用稀疏变分高斯过程(SVGP)从观测重建概率高程场,再通过后验函数空间采样生成空间相关的地形实现,将高程不确定性经几何特征传播至可通行性代价,从而在任意位置得到可通行性代价分布,以均值和标准差分别量化期望代价与不确定性。研究以基于矩的上置信界(UCB)定义风险项并接入 MPPI 控制器。仿真实验中,该方法在不同地形上的导航成功率超过 90%,基线低于 40%,同时减小了姿态变化;并在真实越野地形上完成了机器人验证。
论文提出 TEAR(任务证据权威路由)框架,在机器人端在线决定人类遥操作与本地自主两种控制源之间的权威分配。仲裁依据两类证据:网络状态证据决定遥操作可用性,任务语义证据判断自主执行是否仍与当前任务一致;轻量级时序仲裁器结合机器人状态与当前权威归属决定切换时机。在动态网络条件下的仿真与真实试验中,TEAR 任务成功率接近纯遥操作,遥操作仅占控制步数的 19.8%–27.4%,相比纯自主执行成功率提升 30%–40%。
研究提出EBV-CAN视觉-语言策略,将一张初始全局鸟瞰静态图像与实时内窥镜观测、电机状态结合,通过三个监督式语义查询在缓存图像上定位末端、下一路点和指令目标,再由残差表示预测弯曲与插入指令。配套VLCA数据集包含517次演示、7.5万动作样本、95.8万空间条目和9.3万条剩余路线记录。50个留出回合中末端坐标与路点定位准确率为97.5%和94.8%;1920次物理试验中EBV-CAN成功183/240(76.25%),而离线MAE最低的GRU-BC物理成功率仅1/240。
该论文提出 GlobMP(全局运动规划),将规划与引导统一为一个连续时间规划问题,用分段多项式曲线上的梯度投影方法,在代价降低与可行性恢复之间交替。作者证明:在温和假设下,从细网格起点出发,随着多项式段数增加,代价趋近全局最优,约束可满足任意容差或在稳定实例上精确满足。实验覆盖多达 200 台机器人的团队、Robotarium 测试平台多机器人规划与扩展基准、迷宫导航,以及在双臂人形机器人上引导触觉反应式策略,并报告优于强基线。
该论文面向自主机器人手术中的缝合任务,提出一条从图像到操作的流水线,在生成实时缝线重建的同时执行安全且优化的序列操作,以完成长时程任务。作者指出,可变形缝线没有固定位姿可供跟踪、有效自由度近乎无限,构型难以预测,因此需要重新估计缝线状态而非做假设;缝线操作还涉及依赖过去和当前接触点的序列动作,这些接触点必须被准确、连续地跟踪。
研究在六个流匹配 VLA 机器人策略上对比单步与多步采样,发现单步动作生成在大规模下基本与多步采样持平,多步欧拉积分在推理阶段几乎没有一致优势。该结论在模型训练充分且容量足够时成立。作者据此指出,大型 VLA 可直接从多步模型获得单步策略,无需重训练、蒸馏或额外辅助目标,即可实现低延迟部署。
该论文提出 Co^2Gen 框架,用于在无需人类遥操作的情况下自动生成多机器人协作数据,以训练去中心化 VLA 模型。框架先用去中心化协同规划方法生成以可执行函数形式表示的多机器人协作计划,再用该计划产出协作演示数据,并以去中心化方式微调 VLA 模型。实验显示,用这些数据微调后的 VLA 模型在去中心化协作任务上的表现,与用人类遥操作协作数据微调的模型相当。
研究提出 PATH-Net,一种偏好感知的可通行性估计分层网络,用于越野遥操作,可自适应生成以操作员偏好为条件的可通行性代价地图与速度曲线。该网络通过多头共享骨干融合视觉与几何鸟瞰图特征及短期历史车辆状态,并用最大熵逆强化学习与稀疏速度监督优化速度建议;非对称特征聚合机制将推断拆分为代价分支与速度分支。在 15 名操作员、225 条遥操作轨迹上的实验中,修正 Hausdorff 距离为 0.17 米(激进偏好)和 0.15 米(保守偏好);问卷评估中 NASA-TLX 工作负荷评分从无建议时的 34.7 降至 22.2。
论文提出 OASIS(在线锚点中心场景推理系统),用稀疏锚点节点表示室内环境,每个节点融合语义描述、视觉特征与几何状态,支持在线建图、开放词汇检索与导航。系统复用导航中采集的瞬时观测,在场景变化后重新定位被移动的物体,并以紧凑记忆支持按需证据提取与分层检索。在仿真与真实环境的标准检索基准及静态、动态导航任务中完成验证。
论文提出 CARE 框架,用轻量评论家模型监测本地执行器的执行可靠性,在不可靠时把控制权升级给更强的云端模型,并在升级后保持控制直至智能体恢复,避免逐步切换;共享交接记忆跨执行器维护执行上下文与任务级进度,使模型介入时无需从头开始。在多个具身基准上,CARE 的任务成功率比最强协作基线高 6.3-18.3 个百分点,接近或超过纯云端方案,同时将动作间隔中位延迟降低 28.8-82.6%。
论文提出时空重定向(STR)方法,利用视觉语言模型选择相关运动信号与身体部位,并据此识别关键帧,为关键帧分配更多求解器迭代、为选定部位赋予更高交互权重,以替代统一的逐帧迭代预算。同时引入力学感知接触锚定(MCA),用近似物体力旋量模型细化物体表面接触位置。在此基础上开发时空强化学习(STRL),结合自适应关键阶段采样与基于目标接近度和接触力的奖励。在Unitree G1仿真和Unitree R1真机实验中,STR以更低计算成本提升了几何接触覆盖率与连续性,并改善了下游物体交互任务的完成度。
该研究提出一套集成传感与控制系统,可在CT孔内完成呼吸门控自主进针,无需手动置针或患者屏气。实验验证了系统跟踪与预测患者呼吸周期、执行自主呼吸门控进针以及检测呼吸周期异常的能力。研究目标是缩短CT引导肺活检的手术时间、减轻患者不适并降低辐射暴露。
研究提出Alpha框架,在仿真中对LLM驱动机器人操作按感知(传感器延迟)、驱动(抓取滑移)、运动学(不可达目标)、规划(规划器输出损坏)四类注入校准故障。在150回合配对矩阵中,Llama-3智能体成功率44.0%(33/75),确定性脚本Oracle为64.0%(48/75),McNemar p=3.01×10^-4;剔除规划器输出损坏后两者均为55.0%(33/60),不一致对数为零(p=1.00)。作者据此认为性能差距全部来自提示词到JSON的序列化与验证接口,而非认知推理缺陷,并审计了169次历史试点。
论文提出 FRED 框架,通过自蒸馏让世界动作模型(WAM)在单步去噪中从噪声预测未来视频表征,并以真实未来观测提取的表征为目标,同时以历史观测作为时间上下文条件。在多种真实世界操作场景中,FRED 持续优于同类 WAM,在零样本环境泛化的长时程与域外任务上提升明显;在仅有人类视频演示、无机器人训练数据的任务上成功率达 50.0%,最佳对比方法为 19.4%。
四川具身人形机器人科技有限公司(EIR)完成超1亿元Pre-A轮融资,本轮融资与四川省人形机器人中试熟化项目支持相协同,形成省、市、县三级国资联动支持格局。资金主要用于人形机器人「爱湫」的迭代研发、万台级生产基地建设及销售体系搭建,公司新一轮融资已同步启动。「爱湫」售价9.8万元起,采用3D超短焦投影面部方案,公司提出Emotion Native理念,并自研EIR HARNESS架构统一编排感知、交互、记忆、导航与运动能力。其爱湫情感交互机器人、天巡四足机器人、天行者人形机器人三条产品线均已进入批量交付阶段。

