跳到正文

技术方向

模仿学习 最新动态

与机器人感知、决策和物理交互直接相关的模仿学习进展

33 条精选近 30 天 33 条共收录 50 条

更新

精选归档 · 第 2 页

10月23日周五第 21–33 条
  1. arXiv · cs.RO66

    KiRoSe 用运动学数据高效分割机器人演示

    KiRoSe 提出用机器人运动学数据而非原始多路视频来分割机器人演示,以降低多模态大模型的处理成本。该方法借鉴 Huffman 编码思路构建稀疏运动 token(SMT),用带时间分段监督的运动轨迹编码并量化得到离散运动词汇,再以演示子任务标注监督开放语言模型解读 token 序列。

    推荐理由:论文用机器人运动学数据替代多路视频做演示分段,并给出跨本体零样本迁移的评测结果,可供数据清洗与检索参考。

  2. arXiv · cs.RO60

    VecTile:低成本柔性触觉阵列实现三轴力感知

    Jian Hou、Xin Zhou 与 Adam J. Spiers 提出 VecTile,一种 6 mm 厚、可自制的柔性触觉阵列,通过压阻层与被动硅胶凸点把法向和剪切力转换为可区分的压力图案,4x4 阵列整套成本低于 35 美元。

    推荐理由:论文给出低成本柔性三轴力触觉阵列的制造与标定方案,并用插头插入任务展示其对策略的增益。

10月22日周四
  1. arXiv · cs.RO78

    ASTEROID:非对称在策略蒸馏让历史条件学生学会上下文探索

    作者提出 ASTEROID,一个学生-教师监督学习框架,让学生先在不完全可观测下采集在策略上下文,再由特权专家基于该上下文给出动作标签,从而学会测试时探索。在 11 个环境(含离散探索基准、机器人操作、导航和 Procgen)中,该方法在固定探索预算下回报约为对比方法的 2 倍,交互次数比强化学习基线少约 100 倍。

    推荐理由:论文提出用特权专家在策略上下文上标注的蒸馏框架学习测试时探索,并在仿真与实机操作中给出对比结果。

  2. arXiv · cs.RO77

    DONIC:从人类演示学习通用双手灵巧跟踪控制

    DONIC 是一个通用双手灵巧跟踪器,在操作类别与人体运动来源上联合训练,并配套发布 BiHOI 多视角数据集,包含 1575 段序列、229 个物体。方法将近端策略优化与行为克隆结合成反馈回路,把验证成功的执行回收为训练演示,并用以物体为中心的逐手奖励和 Clip-Centered Advantages 支持单一策略学习异构参考下的协调操作。

    推荐理由:论文同时给出双手灵巧跟踪模型与1575段多视角数据集,并报告未见轨迹与未见物体上的成功率,可用于比较双手操作跟踪方法。

10月21日周三
  1. arXiv · cs.RO72

    TIDE:面向机器人操作的人在环在线后训练系统

    作者提出 TIDE(Training In DEployment),一个面向机器人操作的人在环在线后训练系统,可在部署过程中利用人工干预和策略自身 rollout 在线更新策略,无需学习 critic、奖励模型或动作评分器。

    推荐理由:论文提出无需价值函数或奖励模型的在线后训练系统,并在四项真实双臂操作任务上对比热启动策略与离线演示。

10月20日周二
  1. arXiv · cs.RO71

    UMI 手套新方案:单个头戴相机完成无电子手套的标注与观测

    Yosub Shin 等人提出用单个头戴相机(122 美元)替代腕部相机和位姿追踪器,通过读取无电子手套(22 美元)上的印刷标记与工作区纸片,从同一帧中解出 6-DoF 夹爪位姿和夹爪开度。

    推荐理由:论文用单个头戴相机替代腕部相机与位姿追踪器,给出无电子手套的标注精度和策略成功率对比,可供数据采集方案选型参考。

10月19日周一
  1. arXiv · cs.RO72

    CTR:减少双臂模仿学习中虚假跨臂耦合的训练期数据干预方法

    上海交大等作者提出 Constraint-preserving Temporal Recombination(CTR),一种训练期数据干预方法,在保留各臂局部传感运动内容的同时重新调整片段时序,以保留任务要求的跨臂约束。

    推荐理由:论文提出训练期数据干预方法 CTR,用于削弱双臂模仿学习中的虚假跨臂耦合,并在仿真与实机任务上对比多种策略。

  2. arXiv · cs.RO67

    ALIGN:面向优势条件行为克隆的条件估计与表达对齐框架

    ALIGN 提出一种条件对齐的优势条件行为克隆(AC-BC)框架,用于视觉-语言-动作策略,直接预测策略标签空间中的类别化成对条件,并通过 AdaRMS 调制与流时间融合注入 DiT 动作专家。

    推荐理由:论文针对混合质量机器人数据下的优势条件行为克隆,提出条件对齐框架,并在两个实机任务上给出闭环成功率对比。

  3. arXiv · cs.RO72

    DISCO:在连续动作空间蒸馏树搜索,实现长程多物体整理

    作者提出 DISCO,用渐进加宽的 MCTS 在物理仿真中生成长程规划,并把搜索结果周期性蒸馏进策略-价值模型,使策略在测试时无需仿真搜索即可直接部署。搜索过程中由学习到的策略提出连续动作,价值函数按任务完成进度为动作打分,并借助 GPU 并行仿真加速。在仿真与真实世界的多物体整理任务中,DISCO 的表现优于行为克隆、强化学习和基于搜索的基线。

    推荐理由:论文把仿真中的 MCTS 搜索蒸馏进连续动作策略,为长程多物体整理任务提供了一条可迁移的训练思路。

  4. arXiv · cs.RO85

    Collective Experience Learning:用96台机器人的部署经验改进操作策略

    论文提出 Collective Experience Learning(CEL)范式,让已部署机器人把自身执行经验汇总起来更新共享策略,再返回机群使用。作者通过失败引导经验检索微调(FERT)实现该范式,操作员只提供二值回合结果标签和环境重置,无需额外专家示范或纠正动作;容错异步训练系统(FATS)协调机器人执行、云端推理与策略优化。

    推荐理由:论文提出用已部署机器人自身执行经验更新共享策略,并在96台机器人上验证了规模扩大带来的收益。

  5. arXiv · cs.RO63

    PGPG:面向生成式控制策略的进度引导偏好生成框架

    论文提出 Progress-Guided Preference Generation(PGPG),一种无需人工在环监督的无监督偏好对齐框架,用于微调预训练的生成式控制策略。该方法通过有序覆盖对齐衡量自主采集轨迹相对少量专家演示的序列进度,自动提取伪偏好标签,并称无需手工设计奖励函数。在多项长程操作任务实验中,PGPG 优于标准监督微调基线,并可同时集成扩散策略与流匹配策略。

    推荐理由:论文提出无需人工标注的偏好对齐框架,用少量专家演示自动生成伪偏好标签,可比较其与监督微调在长程操作任务上的差异。

  6. arXiv · cs.RO74

    TILDE:从具身基础模型进行教师闭环蒸馏

    TILDE 提出一种从预训练具身基础模型向未做动作预训练的策略迁移能力的蒸馏框架,结合学生状态上的在线蒸馏与教师执行恢复轨迹的学习。其 AutoDAgger 用机器人奖励模型监测任务进度并触发教师介入,无需人工监控或操控,恢复轨迹采集速度比人类在环方法快 2 倍以上。在三个真实世界任务上,TILDE 的任务表现最高为行为克隆的 4.1 倍,并支持跨架构蒸馏。

    推荐理由:论文提出从具身基础模型蒸馏策略的框架,并给出自动数据聚合与实机任务对比结果,可供关注策略迁移的研究者参考。