2026 年第 43 周 · 10.19 — 10.25
本期文章 222
GelSlim 5.0:用单指尖相机统一视觉与触觉感知
GelSlim 5.0 是一种指尖传感器,用单个固定相机和连续 UV 响应接触层,通过切换照明在同一视角依次采集透膜视觉图像与接触敏感触觉图像,从而避免多相机外参标定。
AirPlayground:跨多种重建环境的空中导航基准
AirPlayground 是一个用于训练和评估空中导航策略的统一基准,构建了覆盖室内、城市户外和植被场景的94个3D高斯泼溅(3DGS)环境,并配有对齐的碰撞几何。
FocusVLA:用未来意图引导动态视角路由的 VLA 框架
FocusVLA 提出一种阶段感知的多视角路由框架,从历史动作预测未来交互意图,并据此在动作生成过程中动态调整全局与局部视角的依赖。作者称现有 VLA 模型在多视角输入下持续依赖腕部视角、缺乏跨操作阶段的视角切换能力。
TIDE:面向机器人操作的人在环在线后训练系统
作者提出 TIDE(Training In DEployment),一个面向机器人操作的人在环在线后训练系统,可在部署过程中利用人工干预和策略自身 rollout 在线更新策略,无需学习 critic、奖励模型或动作评分器。
LogLook:面向前沿模型机器人规划器的执行日志式记忆
LogLook提出一种执行日志式记忆,让前沿视觉语言模型规划器保留执行记录与先前笔记,并自行决定查看哪些帧。在基准自带运动规划器下,它的成功率与仅用笔记的记忆相当,但token减少43%、图像用量不到一半,因记忆或观察失误导致的失败回合也明显更少;直接控制时在RoboMME测试集上解决93.5%。
WholeBodyMem:为人形机器人全身移动操作保留动作前物体记忆
论文提出WholeBodyMem,一种物体引导的感知记忆,用于解决全身VLA策略在动态场景中只能看到当前帧、物体线索易消失的问题。该方法用SAM3跟踪任务物体,由物体事件在自适应预算内因果选取关键帧,动作专家通过交叉注意力读取这些帧及编码外观、几何和时间的物体token。
从推理到动作:前沿 AI 模型在 LIBERO-10 机器人操作任务上的基准评测
May Espinola 等人提出一个闭环操作框架,在 LIBERO-10 基准上评测前沿 AI 模型,模型仅凭视觉观测、本体感知和结构化工具调用控制机器人,无需任务特定微调或预训练操作技能。
SP-HLM:以稀疏姿态驱动的人形机器人移动操作运动生成与全身控制框架
作者提出 SP-HLM,一个基于稀疏姿态接口的人形机器人移动操作框架,用五个任务关键身体姿态结合学习到的隐式运动先验,分别表达空间意图与全身协调。其中 SP-VLA 从多模态观测和语言指令预测稀疏姿态与手指关节位置,SP-MGM 经两阶段蒸馏实时重建全身运动,SP-GMT 再结合显式稀疏目标与隐式运动先验做全身控制。
DONIC:从人类演示学习通用双手灵巧跟踪控制
DONIC 是一个通用双手灵巧跟踪器,在操作类别与人体运动来源上联合训练,并配套发布 BiHOI 多视角数据集,包含 1575 段序列、229 个物体。方法将近端策略优化与行为克隆结合成反馈回路,把验证成功的执行回收为训练演示,并用以物体为中心的逐手奖励和 Clip-Centered Advantages 支持单一策略学习异构参考下的协调操作。
TARSphere:面向长时程具身智能体的全栈框架与仿真基准
TARSphere 是一个面向长时程具身智能体的机器人全栈框架,包含在物理仿真器中运行机器人策略的 TARSphere-Infra、让冻结多模态大模型通过多级可执行技能行动的 TARSphere-Harness,以及覆盖30个室内场景、360个回合的 TARSphere-Bench。
从徒手演示到自主机器人超声:解剖锚定学习框架
研究提出解剖锚定的模仿学习框架,将解剖引导的探头放置与学习式超声导航结合,用于自主机器人超声扫描。该框架先由外部视觉确定任务相关的解剖起点并建立初始探头位姿参考系,再由基于流的策略根据锚点相对位姿、超声图像、探头相机视图和接触力生成扫描动作,终止头预测任务完成。
研究提出月球重力下四足机器人跳跃的端到端强化学习策略
Levin Müller 等人在 arXiv 预印本中提出一种多阶段强化学习方法,为月球重力下的四足机器人点对点跳跃生成单一端到端控制策略,仅依赖任务可用的机载传感。
FlowVLA:面向定量机器人倒水的流感知物理完成学习
FlowVLA 将动作生成与物理完成度估计分离,由共享的 π_{0.5} 动作专家在边界感知监督下学习接近、倾倒和返回,并用融合视觉、关节、腕部力与循环力信念历史的目标无关估计器维持转移质量估计,当估计值加预测残余流出量达到目标质量时触发返回。
Retiming Robot Demonstrations with a Learned Speed Prior:学习速度先验为机器人演示重定时
首尔大学团队提出从大规模演示数据学习速度先验,为机器人演示重定时。给定任务指令、运动路径及沿途图像,该先验预测路径上的执行速度分布,取选定分位数作为统一时钟;单个训练好的先验可覆盖语料库中所有任务,无需为每个新任务重新拟合或标注。
Natural-Language to Nav2:面向代价地图导航的自然语言策略接口
论文提出面向 ROS 2 Nav2 的自然语言策略接口,由本地大语言模型把操作员指令转成 JSON 策略,指定目的地、空间约束和时间或事件条件,再经确定性检查与三个代价地图适配器接入现有导航栈,不改动规划器与控制器。
Watch Your Step:用落脚点预测裁剪感知输入的人形机器人运动策略
arXiv 论文 Watch Your Step 提出预期感知方法,用轻量落脚点预测模型(FPM)仅凭本体感知和速度指令预测未来落脚点,再只在这些落脚点周围采样高程图小块,替代完整机器人中心高程图输入。
距离场驱动强化学习实现机械臂反应式避障
论文提出一种将欧氏距离场(EDF)直接纳入观测空间的强化学习框架,为智能体提供连续几何线索以支持稳定、反应式的避障行为。该方法在7自由度冗余机械臂上验证,实现了从仿真到真实硬件的零样本迁移;尽管训练仅使用随机静态物体,部署后的策略仍能泛化到此前未见的真实环境,并对动态障碍物表现出在线避障能力。作者认为,EDF表示有助于缓解仿真到现实的差距。
多视角潜动作预训练提升跨本体机器人学习
作者提出一种多视角潜动作模型(LAM),用交叉注意力融合同步多相机视角以消解深度与遮挡,再压缩为潜动作,并接入由潜专家与动作专家经顺序流匹配耦合、冻结VLM骨干的策略。
PRISM:以物理机制解耦深度噪声,提升仿真到现实迁移
PRISM 提出一种基于物理的深度噪声建模框架,将单一噪声解耦为传感失效与测量不准两类模态,并借助 3D 视觉基础模型特征做空间语义先验推理。作者称其在噪声深度合成基准上达到当前最优保真度,下游机器人实验在真实世界取得 92.1% 平均成功率,优于单一噪声建模基线。项目页面见 https://shawnleung-sii.github.io/prism-icml2026/。
PAL:先规划后执行的分层记忆框架用于机器人长程操作
PAL 是一个面向视觉语言机器人操作的分层记忆框架,用高层 VLM 把流式视觉观测转成可执行 subtask_list,执行时再选出当前子任务交给低层 VLA 策略。