跳到主要内容
Evolvant
订阅

机器人行业洞察

行业消息

  1. 论文针对视觉惯性里程计中传感器刚性安装假设的局限,研究时变相机-IMU外参标定。方法上结合机器人运动学模型,提出基于Denavit-Hartenberg约定的动态外参标定方法,并设计两步初始化策略估计初始关节角,为后续外参优化提供起点,实现在线估计时变外参。仿真实验显示该框架可适应相机-IMU外参变化并保持有竞争力的定位精度。

    arXiv cs.RO研究工业机器人传感器运动控制

  2. 研究提出 NestedVLA,可在不访问原始训练数据的情况下整合多个独立微调的 VLA 策略:嵌入 VLA 的超网络为选定任务生成动作专家权重更新,每个任务的压缩视觉-语言模型更新单独存储,两类更新叠加到冻结的基础 VLA 上实例化对应策略。在 MetaWorld、ManiSkill、CALVIN 上用强化学习微调的三个策略上评估,平均成功率 66.7%,比最强模型合并基线高 41.1 个百分点;在 ManiSkill 上与逐任务微调差距在 1 个百分点内,在 CALVIN 上明显缩小差距;三策略设置下总存储为单个完整检查点的 1.5 倍。代码已开源于 GitHub。

    arXiv cs.RO研究具身智能强化学习大模型

  3. 该博士论文提出离线训练神经隐式表征来近似Hamilton-Jacobi可达性值函数,使基于优化的控制器能在未知动态环境中实时获得安全信息。方法利用值函数等于直接计算的约束(如符号距离)减去非负动力学修正项的性质,仅学习修正项以保证近似误差下障碍物仍位于预测安全集之外。前四种方法分别将学习函数用作模型预测控制的终端约束和控制屏障函数安全滤波器的屏障候选,覆盖静态环境与数量可变的移动障碍物;地面与空中机器人的仿真和硬件实验显示其避碰效果优于几何与手工设计基线,尤其在短时域和移动障碍物场景。第五种方法用可并行化的顶点树搜索替代网格离线求解器,可为最多13个状态的系统生成屏障候选。

    arXiv cs.RO研究运动控制强化学习自动驾驶

  4. FastVLA是一个免训练、任务感知且时间自适应的视觉token压缩框架,通过任务到视觉注意力为token重要性打分,并依据重要性分布均匀性(逆Simpson指标加在线滑动窗口校准)自适应设定压缩率。在LIBERO与SIMPLER仿真环境中对OpenVLA、OpenVLA-OFT和CogACT的测试显示,LLM主干FLOPs降低35-59%,动作延迟降低9-32%(1.09-1.46倍加速),任务成功率保持;在实体Franka Research 3机器人上动作预测延迟降低20%(1.25倍加速),成功率相当。代码已开源。

    arXiv cs.RO研究具身智能大模型多模态

  5. ForeTac 提出“表示-预测-评估-引导”框架:编码当前触觉状态,以候选动作序列为条件预测未来触觉潜在轨迹,并用从成功/失败物理交互中学到的接触质量目标评估轨迹;推理时将该目标梯度经触觉预测器反传以引导动作生成,模型参数保持冻结。在平面擦拭、曲面擦拭、刷卡、易碎物抓取四项真实机器人任务上,配合扩散策略将平均任务成功率从36.3%提升至71.3%、平均接触成功率从20.0%提升至66.3%,流匹配策略下两项指标同样提升。

    arXiv cs.RO研究具身智能传感器运动控制

  6. WorldScape Policy 2.0 提出一种带推理增强长短期记忆的可控世界动作模型:因果短期视觉记忆把近期观测作为 DiT 预填充,长短期事件记忆将历史 VLM 输出组织为全局历史、局部活跃与事件边界表示用于进度感知检索,检索结果增强感知与自回归规划 token 形成隐式子目标条件,语义强制把事件级指令语义注入潜在规划通路。作者同时构建 ManipEvent-5M 具身预训练数据集,含近 500 万个事件片段及对齐动作轨迹、回合级任务指令、片段级子任务描述、目标图像与视频演示。仿真与真实平台实验显示其在长时程自主规划、细粒度指令跟随与上下文适应上表现更优。

    arXiv cs.RO研究具身智能大模型多模态

  7. 研究提出一个概念验证框架,使四足机器人的非线性动力学在设计阶段可预测,并利用重力、惯性与弹性塑造的非线性共振让多种步态自然涌现。团队研制高顺应性四足机器人eBert,用新理论工具识别出六种非线性简正模态(NNM),并在仿真与硬件上验证其存在。以黑盒优化确定步长后,仿真中每个NNM自然发展为不同速度的独特步态,且大部分可迁移到硬件。

    arXiv cs.RO研究四足机器人具身智能运动控制

  8. 该论文针对过驱动多旋翼的力矩分配问题,提出以控制屏障函数将执行器权限作为向前不变量,在分配零空间中用二次规划在力矩层强制执行。对称设计下旋翼停用的就绪度代价以闭式 ln(n/(n−m)) 给出,跟踪误差在无法精确时被界定为 O(ρ^{-1/2}),鲁棒变体以与机架矩阵无关的闭式下限偏移处理电机参数不确定性。六旋翼与全驱动八旋翼上闭式间隙与仿真吻合至机器精度;300 次随机任务中贪心最大化在最多 51% 的权限稀缺任务中违反认证下限,所提滤波器从未越界,最困难力矩反向下力旋量误差小 79 倍,鲁棒变体在 150 个受扰动对象上均保持下限。

    arXiv cs.RO研究运动控制无人机学术论文

  9. 研究提出模块化方案:在真实世界接触密集片段自主采集密集数据,再用离线强化学习训练局部策略,并与传统运动规划结合完成长时程装配。四个真实任务中仅用2–2.5小时自主采集数据,长时程任务平均成功率96%,仅规划基线55%、最强端到端基线37%;局部策略施加力降低49%,场景级分布外场景成功率仍达90%,共完成超1500次真实世界评估。

    arXiv cs.RO研究具身智能运动控制强化学习

  10. 论文提出 KITE 方法,将操作解耦为与具身无关的交互意图预测和具身特定的运动学解码,交互意图以接触模式为基础的学习表示连接。交互策略仅在源机器人演示数据上训练并在不同形态目标机器人间共享,运动学解码器则利用各具身运动学模型生成的合成数据学习。在仿真与真实世界的四项操作任务上,KITE 实现向结构不同目标具身的零样本迁移,覆盖平行夹爪、灵巧手与复合具身,并优于现有基线。

    arXiv cs.RO研究具身智能灵巧手运动控制

  11. 论文提出 PAKE 全身控制框架,将移动操作分解为部分参考运动生成与底层模仿控制,并引入在大规模运动学数据集上训练的 Kinematic Normalizing Flow(KNF)模型生成多样化部分运动学参考。高层控制器在 KNF 潜在空间中导航以利用冗余解,底层控制器学习动态一致的运动执行。在配备六自由度机械臂的四足机器人上验证:仿真中于 4000 个目标基准上跟踪精度与可行工作空间覆盖优于基线;硬件上在 8 类移动操作任务共 24 个回合中实现末端位姿跟踪误差 4.5 cm 与 0.14 rad,线速度、角速度误差分别为 0.1 m/s 和 0.01 rad/s。

    arXiv cs.RO研究四足机器人具身智能运动控制

  12. ZeroDex提出零样本长程灵巧操作框架,将语言指令从标定多视角RGB图像接地为可执行3D任务规划,输出接触点、放置目标和工具运动锚点等度量3D量。系统由VLM把复杂指令分解为原子任务,通过可复用原语库执行抓取放置与工具使用;工具使用检索物体中心原子动作并对齐6D工具轨迹,灵巧执行则将抓取关键点扩展为任务条件化抓取可供性区域并生成抓取-运动对。真实实验显示其3D接地精度与任务成功率高于单视角RGB-D的零样本视觉提示和约束基线,且无演示系统优于在100个任务演示上微调的VLA策略,并支持执行验证与重规划恢复中间失败。

    arXiv cs.RO研究具身智能灵巧手大模型

  13. arXiv:2606.10180v2 提出对视觉-语言-动作(VLA)模型的“流控制”方法:将键盘等通用用户输入写入VLA流匹配动作专家的初始条件,利用流的确定性在积分过程中保留用户输入信息,无需重新训练或微调即可实时引导动作。作者报告该方法能准确响应地引导机器人动作、对次优输入鲁棒、帮助用户显著提高成功率并加快任务完成,且在流控制轨迹上微调可改进自主策略。

    arXiv cs.RO研究具身智能运动控制大模型

  14. 该论文提出DEFLECT离线后训练框架,利用录制轨迹中执行时刻观测与预测时刻观测的时序对比构建偏好监督,解决异步VLA推理中动作块与执行时刻状态错配的问题。在Kinetix、LIBERO及三个真实机器人任务上测试,最长支持延迟下Kinetix成功率较VLASH提升4.2个百分点,LIBERO上较使用GR00T N1.7的朴素异步执行提升22.7个百分点。

    arXiv cs.RO研究具身智能强化学习大模型

  15. Kamino 是一个基于 GPU 的物理求解器,用 Python 基于 NVIDIA Warp 实现并集成进 Newton 框架,面向异构、强耦合机械系统的大规模并行仿真。它原生支持运动学闭环,无需把系统拓扑近似为运动学树再加闭环约束或 mimic 关节;核心是基于 ADMM 的约束优化算法,将约束刚体多体正向动力学转写为非线性互补问题求解约束力,从而在不简化或凸化接触模型的情况下解析接触动力学。作者在含六个嵌套运动学闭环的双足机器人上训练强化学习策略,单块 GPU 并行仿真 4,096 个环境,得到可行行走策略。

    arXiv cs.RO研究人形机器人运动控制强化学习

  16. 英伟达PAR实验室提出JCA模型,为任意骨架同时生成视频与可回放的3D运动,并生成将运动配准到场景的相机。方法上把3D运动放在支持任意骨架的独立模型中,通过少量交叉注意力层连接预训练视频模型,使运动模型可先用纯运动数据学习;模型还学习在视频帧中定位关节以恢复相机。训练数据由生成式视频编辑器把动画3D资产放入匹配场景构建,结合人类与机器人视频共近20万训练对。评估称其从文本驱动多样骨架的保真度优于视频优先流水线,并支持视频与骨架运动互转及关键帧控制。

    arXiv cs.RO研究仿真与数字孪生大模型多模态

  17. 论文提出 CoGaussian,一个基于开放词汇高斯表示的协同语义占据预测框架,将场景表示为一组与基础模型对齐的稀疏三维高斯,作为多智能体之间通信与融合几何、语义信息的紧凑表示。该方法针对现有协同语义占据方法依赖稠密三维体素标注、且只能识别预定义语义类别的问题。在 Semantic-OPV2V 基准上,CoGaussian 优于现有的开放词汇单智能体方法。

    arXiv cs.RO研究大模型多模态自动驾驶

  18. 论文提出 CLOSER 框架,将目标物体导航中的停止决策建模为闭环证据获取:微调开源视觉语言模型,对跨帧跟踪候选的每个视角标注为目标、非目标或不确定,用基于嵌入的多样性门选择互补视角,再由轻量网络融合各视角概率;若融合后仍不确定,则用扩散策略仅依据跟踪掩码和深度驱动智能体靠近候选,直至判断明确。该框架本地运行,可直接接入现有 ObjectNav 系统而无需重新训练。在 Gibson 和 Habitat-Matterport 3D 上,平均成功率提升 3.6 个百分点,路径长度加权成功率提升 2.0 个百分点。

    arXiv cs.RO研究具身智能大模型多模态

  19. 该研究提出PanoGraphGS框架,在共享高斯几何上联合学习语义与实例特征,通过基于原型的语义学习和基于关联的实例学习实现跨视角一致的全景预测,并支持新视角全景分割与高斯级全景解码;语义感知场景图模块可恢复楼层-房间-背景物-物体的层级及包含与空间关系。团队同时发布真实世界全景场景理解数据集NaviGS,含3DGS、网格、RGB、语义与深度数据。在Replica和NaviGS上,其物体节点准确率平均超过最强基线50个百分点以上,2D全景分割亦为所评估方法中最优。

    arXiv cs.RO研究具身智能多模态数据集