跳到正文

NEWS / 动态

资讯 · 全部

按时间浏览,使用右上角筛选切换领域。

10月19日周一
  1. arXiv · cs.RO58

    InteractAgent:用记忆增强反思实现闭环人-场景交互的智能体系统

    InteractAgent 是一个面向长程人-场景交互的智能体多模态大模型系统,以单个 MLLM 同时担任规划器与评估器、冻结的 MotionLLM 作为执行器,形成规划、执行、观测、反思的闭环。系统引入在线观测做逐步恢复决策(继续/重做/重规划),并用记忆增强反思进行多轮计划细化与自适应停止。在 UniHSI 上,作者称其相比免训练基线提升了任务成功率并减少了穿透,代码已开源于 GitHub。

  2. arXiv · cs.RO64

    SteerAct:用少样本时间引导改进预训练机器人动作模型

    SteerAct 提出一种少样本时间引导框架,在不更新动作模型权重的情况下,通过修改特征激活提升预训练机器人动作模型的任务成功率。该方法用预训练稀疏自编码器提供候选特征,并以时间描述符刻画各特征局部激活顺序模式的分布,从而在无需时间步对齐的情况下比较不同 rollout。

    推荐理由:论文提出用稀疏自编码器特征的时间描述符做少样本激活引导,为测试时提升预训练动作模型提供可迁移方法。

  3. arXiv · cs.RO58

    Humanoid SRL:为人形机器人增加额外机械臂实现协调全身移动操作

    研究团队将一条额外机械臂集成到人形机器人平台,考察形态增强如何改变其可行动作空间。控制上采用基于模型的轨迹优化为目标条件强化学习控制器生成动力学可行运动,控制器在仿真中训练后以零样本方式迁移到硬件,实现接触丰富的三臂全身移动操作。团队还在部分任务上用硬件演示训练的扩散策略展示了视觉引导的自主执行。

  4. arXiv · cs.RO75

    VQ-WM:用向量量化世界模型做机器人操作潜空间反馈运动规划

    作者提出向量量化世界模型 VQ-WM,将离散潜空间长程搜索与连续视觉反馈控制结合,用于机器人操作规划。该方法用首达时间的准度量估计替代欧氏距离,使规划抽象与控制器能力对齐。在汉诺塔实机操作中,该方法仅用短演示数据即达到 100% 成功率,并在操作与运动仿真基准上比最强世界模型高出 13.3 至 85.3 个百分点。

    推荐理由:论文把离散潜空间搜索与连续视觉反馈控制结合,并用首达时间估计对齐规划与控制器能力,为长程操作提供可迁移方法。

  5. arXiv · cs.RO58

    仿章鱼软体连续臂通过可充气壳体实现自适应弯点

    研究提出一种仿章鱼肌腱驱动软体连续臂,通过在臂内集成可充气壳体阵列,充气时局部摩擦增大、卡住肌腱,从而在臂上形成临时新锚点,自适应改变弯曲位置。实验显示驱动段呈非恒定钟形曲率,与真实章鱼臂伸展运动中的形态相近。作者称该设计相比传统单肌腱连续体操作器扩大了工作空间,并能通过选择性曲率调节独立塑造臂的不同区域,同时避免多段多执行器系统的机械复杂度。

  6. arXiv · cs.RO65

    AQUAACT:摇杆级水下遥操作数据集与闭环基准发布

    AQUAACT 是作者称为首个公开的语言标注水下数据集,将相机图像与人类摇杆指令配对,包含 1.9 小时真实演示和 17.9 小时仿真演示,并附车辆惯性测量数据。实验显示仿真演示可迁移到真实数据,并大幅减少策略所需的真实演示量。在仿真中对七种策略(从模仿学习基线到 VLA 模型)的闭环基准测试显示,没有策略完成超过五分之一的回合,陆上数据预训练也未让大型 VLA 模型优于从头训练的小策略。

    推荐理由:论文公开了带语言标注的水下遥操作数据集,并用七种策略的闭环基准说明水下自主任务仍未解决。

  7. arXiv · cs.RO66

    CusADi2 开源库:在 GPU 上低延迟批量计算机器人运动学、雅可比与海森矩阵

    CusADi2 是一个开源软件库,通过在单个批次实例内部额外并行化计算,降低机器人运动学、雅可比与海森矩阵的批量求值延迟。

    推荐理由:该库在 MuJoCo Menagerie 全部 67 个机器人上对比多种基线,给出批量运动学与雅可比、海森计算的低延迟方案。

  8. arXiv · cs.RO72

    BiDex-100:覆盖100余项仿真任务的双臂灵巧操作基准

    BiDex-100 是一个面向双臂灵巧操作的仿真基准,包含106项任务,按泛化、指令跟随、少演示、长时程和记忆五个能力维度组织。每项任务配有受控视觉与空间变化的域外变体,用于评估鲁棒性;基准支持两种本体,提供8,080条经成功验证的遥操作演示,共625万帧。作者在统一协议下评测了七个近期视觉-语言-动作模型,给出各能力维度、鲁棒性和数据效率的基线结果。

    推荐理由:该预印本给出106项双臂灵巧操作仿真任务与7个VLA模型的统一评测基线,可用于比较现有模型的能力与鲁棒性。

  9. arXiv · cs.RO71

    SCBT:将基础模型推理摊销为确定性行为树的无人机控制方法

    Behnam Moradi 提出 Self-Crystallizing Behavior Trees(SCBT),把基础模型当作编译器而非运行时,在行为树节点失败时由 LLM 提出最小子树补丁,经 CMA-ES 调参、上下文赌博机决定是否调用 LLM,并通过静态检查、不变量监控回放和相对未修补树的经验余量三阶段准入。

    推荐理由:论文把大模型推理编译成确定性行为树,并给出仿真中的调用次数与任务成功率对比,可了解基础模型与经典控制结合的一种路径。

  10. arXiv · cs.RO62

    面向远程操作共享自主的意图信息模型预测控制

    论文提出一种共享自主仲裁策略,利用多模态意图推断所得信念分布的熵动态调整自主等级。人类意图用动态贝叶斯网络建模,依据遥操作中操作者实时注视数据和机械臂运动更新目标信念,再将人类输入与自主控制的融合表述为模型预测控制问题,实现从直接遥操作到完全自主的连续过渡。

    推荐理由:论文用眼动与机械臂运动推断操作意图,并据此在遥操作与自主控制间连续调节权限,可与既有共享自主方法对照。

  11. arXiv · cs.RO58

    SurGPT:用于机器人手术技能评估与手势识别的多任务基础模型

    作者提出 SurGPT 基础模型,可自动分析达芬奇手术机器人视频,同时完成手术任务分类(打结、穿针、缝合)、标准化技能水平评估和手术手势自然语言描述三项任务。模型结合视觉编码器与 transformer 架构,用位置编码建模时序、注意力机制整合时空特征,并以自适应不确定性加权进行多任务学习。在达芬奇技能模拟器数据集上,作者称其在手术任务识别上达到当前最优表现,技能评估结果与专家评价相关。

  12. arXiv · cs.RO58

    RCRA:按行人反应性调节残差自适应的导航框架

    作者提出 RCRA 在线自适应框架,依据估计的行人反应性调节冻结保守导航策略周围的残差。基于 Transformer 的反应性估计器在仿真中比假设行人目标已知的贝叶斯基线场景平均准确率提升 12.62 个百分点。在每场景成功率均超过 90% 的基线中,RCRA 相对保守骨干网络将场景平均路径长度缩短 16.7%,相对随机训练基线缩短 7.3%,平均成功率比反应性训练策略高 14.88 个百分点。

  13. arXiv · cs.RO69

    T(R,O) Grasp++:面向杂乱环境的跨本体灵巧抓取基准与扩散框架

    作者提出 T(R,O) Grasp++,一个面向杂乱环境的跨本体灵巧抓取合成扩散框架,并构建约 0.5B 条抓取标注、覆盖八种灵巧手和约 5 万物体的仿真基准。实验称该模型在八种灵巧本体上平均成功率达 88%,推理时延仅 0.3s,推理样本效率提升 10 倍以上。该工作为预印本,结果基于仿真实验。

    推荐理由:论文给出约5亿条抓取标注的仿真基准与跨八种灵巧手的扩散抓取框架,可用于比较杂乱场景抓取方法。

  14. arXiv · cs.RO55

    Energy Score 稳定的注意力混合密度策略:面向多模态机器人运动的轻量方法

    作者提出一种用 Energy Score 训练的注意力混合密度策略,将未来视觉运动轨迹表示为显式概率分布,单次前向即可输出高斯混合参数,以避免 MDN 奇异性和梯度尺度不稳定。在 8 自由度机械臂上,该方法生成不同的避障轨迹并稳定避障学习;在随机移动物体抓取任务中,其在若干未见条件下比 Diffusion Policy 高 15-25%。

  15. arXiv · cs.RO44

    面向地面机器人的动态相机-IMU外参标定视觉惯性里程计

    针对传感器刚性安装假设限制视觉惯性里程计适应性的问题,该研究提出基于Denavit-Hartenberg约定并引入机器人运动学模型的动态相机-IMU外参标定方法,配合两步初始化策略估计初始关节角,实现时变外参的在线估计。仿真实验显示该框架可适应相机-IMU外参变化并保持有竞争力的定位精度。

  16. arXiv · cs.RO74

    TILDE:从具身基础模型进行教师闭环蒸馏

    TILDE 提出一种从预训练具身基础模型向未做动作预训练的策略迁移能力的蒸馏框架,结合学生状态上的在线蒸馏与教师执行恢复轨迹的学习。其 AutoDAgger 用机器人奖励模型监测任务进度并触发教师介入,无需人工监控或操控,恢复轨迹采集速度比人类在环方法快 2 倍以上。在三个真实世界任务上,TILDE 的任务表现最高为行为克隆的 4.1 倍,并支持跨架构蒸馏。

    推荐理由:论文提出从具身基础模型蒸馏策略的框架,并给出自动数据聚合与实机任务对比结果,可供关注策略迁移的研究者参考。

10月18日周日
  1. arXiv · cs.RO66

    HumanoidPose:仅凭视频估计人形机器人全身位姿

    Jiaxi Jiang 等提出 HumanoidPose 框架,把视觉当作本体感知,仅从视频恢复人形机器人在世界空间中的全身关节配置。该方法将预训练人体姿态特征与机器人运动学结合,并把人体动作重定向到十六种人形机器人本体,从而完全用合成数据学习;还通过自训练利用无标注在线视频训练 2D 机器人姿态检测器。

    推荐理由:论文提出仅凭视频恢复人形机器人全身关节配置的框架,并在三个真实平台上与基线比较误差。

  2. arXiv · cs.RO78

    The Bitter Lesson Comes to Robotics:九款前沿多模态语言模型直接控制真实机械臂的评测

    一篇 arXiv 预印本在 RoboDojo 的六项操作任务上评测了九款前沿多模态语言模型,让它们直接控制真实机械臂。作者称这是首次在物理硬件上对广泛前沿模型做统一操作任务比较,结果显示这些模型能完成多种操作任务,但精度和效率尚不足以在实际动作预算内完成。2026 年 7 月至 10 月间基准性能对应 53.9 天的翻倍周期,最佳执行速率提升 4.4 倍,最低执行成本下降 6.2 倍。

    推荐理由:在真实机械臂上统一评测九款前沿多模态语言模型,给出能力现状与性能翻倍周期,可作为通用模型直接控制机器人这一路线的参照。

  3. arXiv · cs.RO71

    GOFusion:面向自主机器人导航的实时高斯-占据子图融合系统

    GOFusion 是一个面向自主机器人导航的实时视觉建图系统,将高斯图元锚定到局部占据地图,同时为路径规划提供空间感知和高保真外观。系统基于视觉-惯性 SLAM 的位姿估计与局部占据地图构建 3D 高斯地图,并把 3D Gaussian Splatting 优化限制在活跃子图内以约束 GPU 显存占用。

    推荐理由:论文把高斯图元锚定到局部占据地图,并用在线Fisher近似驱动剪枝与下一最佳视角规划,可供自主导航与建图研究参考。

  4. arXiv · cs.RO78

    DexGraspFlow:融合运动学拓扑的跨本体灵巧抓取生成框架

    DexGraspFlow 提出一种条件式连杆级 SE(3) 流匹配框架,将几何关系与运动学拓扑结合用于跨本体灵巧抓取生成。该方法在三种机器人手、30 组物体-手配对上的平均仿真成功率为 95.33%,含逆运动学的平均生成延迟比一个先进基线低约 49%。作者还报告了对七种去指变体的零样本适应与手掌朝向控制,并在部署手型的 100 次实机抓取试验中取得 91% 成功率。

    推荐理由:论文把运动学拓扑引入跨本体灵巧抓取生成,并给出三种手、30 组手物配对的仿真结果与实机试验。

  5. arXiv · cs.RO60

    Skill-RSI:冻结可移植操作技能,并考察递归自我改进的作用

    研究提出 Skill-RSI,让强通用模型仅在离线阶段编写、运行、诊断并修复仿真中的操作技能,冻结后的技能以代码形式运行或由廉价调用器读取描述执行。

    推荐理由:论文提出冻结技能加廉价调用器的复用路线,并给出编译成本、失败任务与隐藏布局上的对照数据。

  6. arXiv · cs.RO71

    VLA-Rolling:复用动作尾部以减少去噪步数并提升控制

    VLA-Rolling 提出一种轻量推理框架,通过动作尾部继承、逐动作置信度估计和置信度引导的重加噪与去噪预算分配三阶段复用动作尾部,底层 VLA 保持冻结。

    推荐理由:论文提出复用动作尾部的推理框架,在16组模型与基准组合上同时报告推理加速与成功率变化,可供比较VLA推理效率方案。

  7. arXiv · cs.RO67

    研究提出 NGC:潜世界模型应沿潜流形距离规划

    针对 LeWM 等潜世界模型用欧氏距离搜索动作序列的做法,作者发现该假设只在目标附近成立,远处 L2 代价会形成虚假低代价盆地困住规划器。作者据此提出 Neighborhood Graph Cost(NGC),在训练潜变量构建的互近邻图上计算最短路径距离,只改终端代价且无需重训。

    推荐理由:研究指出 LeWM 的欧氏终端代价只在目标附近成立,提出沿潜流形测距的 NGC 方法,为潜空间世界模型的规划代价设计提供可迁移思路。

  8. arXiv · cs.RO39

    Dubins追捕者对未知逃逸策略的有限时间捕获

    针对平面追逃问题,Dubins追捕者需捕获可瞬时改变航向的慢速一阶点质量逃逸者。研究提出单增益转率反馈律,给出保证有限时间捕获的显式容许增益区间,并导出捕获时间上界及增益区间非空所需的转向权限。进一步导出仅由追捕者参数计算的速度上限,低于该上限时在最大允许增益下保证成立,数值仿真验证了有效性。

  9. arXiv · cs.RO58

    基于混合现实的半自主机器人遥操作系统用于精细双臂任务

    研究提出一套基于混合现实头显的可扩展半自主机器人遥操作系统,用于在机器人上采集示范数据。系统自主执行大部分任务轨迹,操作员只在关键阶段做微调,以减少大规模数据采集中的操作负担。作者在高精度精细双臂销孔装配任务上采集数据并训练模仿学习策略,称以更低的数据采集投入获得可用于训练全自主执行策略的高质量示范。

  10. arXiv · cs.RO71

    DreamCan:用稀疏视觉规划衔接视频模型与机器人操作策略

    DreamCan 提出一种分层策略,用预训练视频模型改造的高层规划器生成稀疏视觉子目标,再由低层视觉运动策略执行,从而把视频模型的可执行性约束进规划。作者从无动作的离线机器人视频中估计子目标的可达性与任务效用,并用动态规划自动选取子目标序列,无需人工标注。

    推荐理由:论文提出用稀疏视觉子目标替代稠密视频预测的分层策略,并在 LIBERO-Long 与真实双臂任务上给出对比结果。

10月14日周三
10月13日周二
  1. Physical Intelligence Blog72

    Physical Intelligence 推出 Pi API 测试版,开放 π 系列模型微调与托管推理

    Physical Intelligence 发布 Pi API 测试版,开发者可上传数据、在 Pi 管理的算力和基础设施上微调 π 模型,并通过托管网关调用微调后的模型做推理。

    推荐理由:Pi API 测试版把数据上传、微调和托管推理串成一条流程,可用于观察机器人基础模型如何被下游团队自行迭代。

10月10日周六
  1. NVIDIA · Robotics38

    英伟达展示开发者如何用前沿AI智能体与Omniverse库构建仿真应用

    英伟达展示开发者用GPT-6 Astra等前沿AI模型配合Omniverse库,通过自然语言指令构建仿真应用。仓库仿真在80台输送机、40条机械臂和800个箱子场景下以全高清30帧/秒运行两分钟,机械臂完成640次成功放置箱子。另有基于ABB YuMi的CAD转SimReady资产、Isaac Lab线缆布线等案例。

10月6日周二
  1. Boston Dynamics Blog30

    Boston Dynamics 展示 Spot 在公共安全任务中的应用

    Boston Dynamics 展示 Spot 机器人在公共安全领域的应用:进入灾难现场搜寻幸存者、协助处置人质事件与毒品实验室调查,并在火灾后做结构勘察。标准公共安全套件含 Spot Cam、超视距电台与机械臂,可在安全距离外提供 360 度视野、最高 25 倍变焦和热成像;机械臂可举起 15 磅、拖动 50 磅物体。

10月1日周四
  1. Boston Dynamics Blog72
    Boston Dynamics Blog的报道配图

    Boston Dynamics 发布 Atlas 新一代 13 自由度机械手

    Boston Dynamics 发布 Atlas 机器人新一代手部,自由度从上一代 GR2 的 7 个提升到 GR3 的 13 个,采用四指设计并取消小指。新手指尖和手掌覆盖密集压力触觉传感器,尺寸接近偏大的人手,强度与上一代相当,可搬运装载 100lb 以上的迷你冰箱。

    推荐理由:Atlas 新一代手把自由度、可仿真性和工具使用能力放在同一套设计取舍里,可与上一代七自由度手直接对照。

9月30日周三
  1. Figure News18
    Figure News的报道配图

    Figure 为退役 F.02 机器人训练跳跃入钢水,并推出纪念金属制品

    Figure 为给 F.03 机队腾出维护资源,将大部分 F.02 机器人退役,并在芬兰 Imatra 一家铸造厂让机器人自主跳入钢水熔化。团队在仿真中训练新 AI 模型,实机在 24 小时、6 次熔炼、每次 20 分钟窗口内完成,高温与电磁场下 AI 策略运行正常。熔炼所得金属棒运回美国,加工成限量纪念制品。