跳到正文
4件大事4个来源4件一手发布约 2 分钟阅读
头条

Scan2Instruction与PRPT-KS:一次扫描实现语言引导导航的无示范适配

研究提出Scan2Instruction与PRPT-KS,用一次简短的iPhone扫描替代人工示范,完成语言引导导航策略在新场景的适配。Scan2Instruction把扫描结果编译成完整训练环境并自动合成带指令的可执行导航片段,PRPT-KS则直接从重建场景读取闭式Pareto效用更新策略,无需学习型critic和人工标注。

Zhuoyuan Yu 等6人 · arXiv一手原文
01

论文研究

Josef Liyanjun Chen · arXiv一手

RoboJev-27B 开源机器人操作成功检测视觉语言裁判模型

RoboJev-27B 是一个开放权重的视觉语言模型,输入任务指令与 10 帧操作画面,预测机器人是否完成任务。它在同型号 SO-101 的 268 个留出回合上取得 95.2% 平衡准确率和 0.993 AUROC,在未见实验室/机器人采集的 459 个回合上 AUROC 为 0.890。

Jianibieke Adalibieke 等5人 · arXiv一手

AdaDexTrack:面向自适应灵巧操作的动态调制跟踪框架

AdaDexTrack 提出一种调制器在环的框架,用于语言条件下的灵巧手物交互跟踪。该框架以大规模专家到通才蒸馏得到的跟踪器承载技能,调制器经强化学习训练,对参考轨迹、物体隐表示和位置目标做三类反馈修正。作者称其在未见轨迹和未见物体集合上的平均跟踪误差与成功率均优于此前 SOTA,并在真实硬件上展示了零样本 sim-to-real 迁移,加入调制器相比仅用跟踪器有显著提升。

Jingmeng Zhou 等9人 · arXiv一手

MOON:为视觉语言导航策略学习何时遗忘与如何恢复

MOON提出一种框架,为冻结的视觉语言导航策略加装两个轻量模块,参数量增加不到1%,用于在偏离路线时判断何时清空历史并学习如何恢复。作者称在R2R-CE和RxR-CE上,MOON取得对比方法中最高的R2R-CE成功率,并把冻结基线的成功率分别提升5.2和6.0个百分点;随机触发消融显示增益取决于清空历史的时机。

Zixuan Chen 等8人 · arXiv一手

RoboLongR:因果一致奖励引导机器人逐步掌握长程操作

RoboLongR 是一个离线到在线的框架,通过学习依赖历史的奖励引导策略适应新任务,核心目标是让奖励进度与执行历史支持的前置条件保持因果一致。方法采用阶段打乱监督、循环记忆和两轮训练,并以稀疏终端反馈触发对重复高分失败的纠正。

02

产业

The Robot Report

Eka Robotics 完成 1.5 亿美元 A 轮融资,扩展视觉-力-动作模型

Eka Robotics 本周宣布完成 1.5 亿美元 A 轮融资,由 a16z 和 F-Prime 领投,资金用于扩展技术和客户部署。这家 2024 年成立、位于马萨诸塞州剑桥的公司正在构建视觉-力-动作(VFA)模型,通过大规模强化学习让机器人建立物理直觉,并称其机器人在训练分布外抓取物体速度约为每小时 1500 次操作,还能拧灯泡和插线。

查看本期全部文章 14 篇 ↗