跳到主要内容
Evolvant
订阅

协同动作与风格先验用于学习足式运动

该论文提出从少量专家演示数据集中学习潜在动作作为归纳偏置,用于足式机器人直接关节级力矩控制的强化学习。该方法使策略直接利用专家动作知识、提升探索效率,智能体不受演示奖励水平限制,迁移任务性能显著提升;潜在动作先验与模仿风格奖励结合可更接近复现专家行为。

发布于 10-22 10:56来源:arXiv cs.RO

转载 · 官方发布原文:arXiv cs.RO ·《Synergistic Action and Style Priors for Learning Legged Locomotion》查看原链

深度强化学习(DRL)使机器人能够通过与环境交互学习复杂行为。 然而,由于学习算法不受约束的特性,所得解往往脆弱且显得不自然。 这在学习直接关节级力矩控制时尤为明显,因为归纳偏置难以融入学习过程。 我们提出一种用于学习运动控制的归纳偏置,尤其适用于力矩控制:从少量专家演示数据集中学习潜在动作。

该先验使策略能够直接利用专家动作中包含的知识,并促进更高效的探索。 我们观察到,智能体并不受限于演示的奖励水平,且迁移任务中的性能显著提升。 潜在动作先验与用于模仿的风格奖励相结合,可更接近地复现专家行为。 视频见 https://sites.google.com/view/latent-action-priors。

来源arXiv cs.ROen原文发布 10-21访问原文