跳到正文
热点事件持续更新

ResMerge:冻结预训练策略上的可合并残差策略学习

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Kefei Zhu 等作者提出 ResMerge 两阶段框架:在冻结的预训练机器人策略之上,用残差强化学习在适应阶段获取任务特定修正,无需额外专家演示,再通过参数空间合并整合兼容的残差以减少存储参数。作者同时提出 Residual-Field Consistency(RFC)指标,通过比较修正方向与幅度评估残差动作场空间的兼容性。 作者称,在 LIBERO 上跨两个骨干网络以及真实 Franka 机器人上的实验中,ResMerge 的持续学习表现优于强 PECFT 基线,选择性合并降低了残差参数占用。论文为 9 页预印本,代码与项目网站已给出;上述效果均为作者自述,尚未经同行评议或独立验证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv · cs.RO精选
    ResMerge:用残差策略学习与合并实现预训练机器人策略的持续适应

    ResMerge 是一个两阶段框架,在冻结的预训练策略之上学习可合并的残差策略,用于机器人的持续适应。其残差强化学习在适应阶段无需额外专家演示即可获得任务特定修正,参数空间合并则整合兼容的残差以减少存储参数;作者还提出 Residual-Field Consistency(RFC)指标,通过比较修正方向与幅度评估残差动作场空间的兼容性。在 LIBERO 上跨两个骨干网络以及真实 Franka 机器人上的实验显示,其持续学习表现优于强 PECFT 基线,选择性合并降低了残差参数占用。论文为 9 页预印本,代码与项目网站已给出。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。