跳到正文

技术方向

具身智能 最新动态

与机器人感知、决策和物理交互直接相关的具身智能进展

143 条精选近 30 天 140 条共收录 290 条

更新

精选归档 · 第 2 页

10月30日周五第 21–40 条
  1. arXiv · cs.RO62

    OmniVIC:结合视觉语言上下文学习的自改进变阻抗控制器

    OmniVIC 提出一种由视觉语言模型增强的通用变阻抗控制器,从图像和自然语言推理任务上下文并生成自适应阻抗参数。其核心是自改进的检索增强生成与上下文学习,从结构化记忆库检索相似历史经验,并结合实时力/力矩反馈把交互力约束在安全阈值内。作者称在仿真和实机复杂接触任务上优于基线,平均成功率从 27% 提升到 61.4%,力违规减少;该工作已被 IEEE Humanoids 2026 接收。

    推荐理由:论文把视觉语言模型的上下文推理接入变阻抗控制,并给出仿真与实机任务的成功率对比,可供关注语义推理与柔顺控制衔接的研究者参考。

  2. arXiv · cs.RO78

    DexSuite 发布开源灵巧操作仿真框架,覆盖 30 个任务与 100 多种单臂机器人

    DexSuite 是一个基于 Genesis 模拟器的开源一体化灵巧操作仿真框架,提供 30 个任务,并把 10 种机械臂与 12 种末端执行器(从平行夹爪到灵巧手)组合成 100 多种单臂机器人和数千种双臂组合。

    推荐理由:该框架把机械臂、末端执行器、任务、遥操作与触觉仿真整合进同一套开源环境,并给出基准与示范数据集。

  3. arXiv · cs.RO72

    SwapBot:通过可互换末端执行器与触觉感知实现以工具为中心的机器人操作

    SwapBot 是一套模块化、以工具为中心的末端执行器系统,用低成本适配器把常见家用工具快速转换为机器人末端执行器,并支持快速自主更换。每个适配器集成紧凑触觉传感器,并接入遥操作系统用于采集演示;用户研究显示遥操作时任务完成时间和操作者负担均降低。

    推荐理由:论文给出可换工具末端执行器与触觉传感器的硬件方案,并用消融实验比较触觉对接触密集任务策略的影响。

  4. arXiv · cs.RO78

    Gym-Anything for Robotics:用编码智能体扩展机器人物理仿真并发布RoboWorld基准

    作者提出Gym-Anything for Robotics框架,让编码智能体创建机器人仿真,以缓解仿真构建依赖专家、难以规模化的问题。他们依据美国GDP数据挑选覆盖有经济价值体力工作的场景,定义良好仿真与任务的标准,并设计对抗式创建-审计循环逐项检查。基于该流程构建的RoboWorld包含25个仿真,以及难度不同的25个测试和175个训练强化学习环境;最好的前沿模型在所有RoboWorld测试任务上均失败,平均奖励仅0.06。

    推荐理由:论文提出用编码智能体自动生成机器人仿真环境,并给出25个仿真与200个RL环境的基准结果,可供比较仿真规模化路径。

  5. arXiv · cs.RO78

    PhysVLMM:为机器人场景图中的铰接物体维护交互条件物理信念图

    PhysVLMM 提出一种为视觉-语言-运动地图中每个铰接部件维护物理信念并回答规划器查询的方法,包含地图更新与查询两个算法。该方法把拉动方向保留为后验而非点估计,并将每次拉动的证据以闭式形式传递给地图中未被触碰的相似部件,还能在给定风险下回答动作是否成功或选择弃答。

    推荐理由:论文在18个真实家庭的门和抽屉上验证关节类型识别与拉动响应预测,并给出与可微仿真在误差和速度上的对比。

  6. arXiv · cs.RO62

    DAWN:基于扩散的分层机器人拆螺丝工作流网络

    作者提出 DAWN(Diffusion-based Alignment and unfastening Workflow Network),一个面向真实世界拆螺丝任务的分层机器人框架,将流程分为对齐插入与拧出两个阶段。

    推荐理由:论文把拆螺丝长程任务拆成对齐插入与拧出两阶段,并在 Franka 实机上验证,可供接触密集操作研究参考。

  7. arXiv · cs.RO60

    HiFOR:面向VLA模型的动作引导世界检索分层预见框架

    作者提出HiFOR,一个带动作引导世界检索的分层预见框架,用于视觉-语言-动作模型。该方法通过分层依赖掩码联合预测短期状态演化、语义里程碑和最终目标状态,并用结构感知潜在世界建模与动作引导因子化世界检索为动作生成提供针对性引导。作者称在两个仿真基准和六个真实机器人操作任务上验证了方法有效性。

    推荐理由:论文把短期状态、语义里程碑与最终目标纳入统一分层预测,并用动作引导检索未来信息,可供VLA策略设计参考。

  8. arXiv · cs.RO64

    JEDI:面向上下文模仿学习的联合嵌入演示压缩方法

    JEDI 提出将演示压缩为潜在槽位,在冻结的视频-JEPA 空间中训练其预测查询回合的下一阶段关键帧,以缓解长多模态轨迹占用上下文的问题。方法用任务与过程反事实帮助槽位保留执行细节,并通过预测器从演示库中选择示例;用关键点 token 后训练后,可在机器人上实现人手条件化。

    推荐理由:论文提出以查询未来预测为目标的演示压缩方法,并在 LIBERO 与实机上验证多示例上下文下的策略适配。

  9. arXiv · cs.RO75

    TouchBridge:触觉条件人到机器人数据转换用于灵巧操作

    TouchBridge 提出硬件与软件协同的人到机器人数据转换框架,通过可穿戴人类演示接口与对应机器人接口建立视觉和指尖触觉的跨本体对应。其 Tac-Retarget 方法以实测接触对齐指尖接触区域,无需物体网格、位姿估计或物理仿真即可完成重定向。

    推荐理由:论文给出触觉条件重定向的人到机器人数据转换框架,并报告四类实机接触任务的成功率与采集效率对比。

10月29日周四
  1. arXiv · cs.RO67

    AcrossDEX 1.0:从人体运动预训练到跨手本体的双臂灵巧操作

    AcrossDEX 1.0 是一个连接人体运动预训练、仿真专家学习、机器人演示采集与视觉闭环执行的学习系统,支持六通道 Inspire 手和十六关节 Allegro 手两种本体。

    推荐理由:论文给出跨两种灵巧手本体的统一适应流程,并比较直接回归、扩散与流匹配在开盖和物体重定向任务上的成功率。

  2. arXiv · cs.RO78

    RoboAtom 提出大规模原子动作监督数据集 RoboAtom-Data

    RoboAtom 提出 RoboAtom-Data,为多来源现有数据补充统一、时间对齐的原子动作标注,覆盖 145 万条轨迹、688 万个技能标注片段和 16882.1 小时。其流程结合统一协议、大规模人工标注、同一有序技能序列重复执行间的传播以及多阶段质量控制。作者构建 RoboAtom-Bench 以标准化技能识别与时间边界定位评测,基于标注数据训练的 RoboAtom-Anno 在该基准和外部 WGO-Bench 上优于所评估的开源与闭源模型。

    推荐理由:论文给出跨来源统一原子动作标注的数据规模与构建流程,并附技能识别基准和分层执行对照实验。

  3. arXiv · cs.RO74

    LOGIV:面向长程机器人任务的图验证执行与因果局部修复框架

    LOGIV 是一个面向具身机器人执行的图工程框架,用显式任务图连接符号规划、基于观测的验证与具身动作,并在执行中检查条件支撑与资源顺序边的物理有效性。在 RoboTwin V2 和 BiCoord 的 20 个双臂任务、三种执行骨干上,无注入扰动时平均任务成功率分别提升 10.67 和 15.33 个百分点;在预设扰动下,其任务完成与条件恢复优于三个适配的恢复基线。

    推荐理由:论文把任务图与执行期条件校验结合,为长程机器人任务提供可复用的失败恢复接口。

  4. arXiv · cs.RO72

    Humanoid Dodgeball:用强化学习训练人形机器人快速躲避动态障碍

    Humanoid Dodgeball 提出一个面向人形机器人敏捷动态避障的强化学习框架,通过威胁感知奖励塑形和多个方向特定的对抗运动先验,让机器人对飞来的抛射物做出全身躲避动作。作者称仿真与硬件实验显示,该框架在不同障碍速度和发射距离下提升了动态避障表现,同时保持稳定且物理可行的人形运动。

    推荐理由:论文给出人形机器人躲避高速抛射物的强化学习框架,可用于比较动态避障中的奖励设计与运动先验。

  5. arXiv · cs.RO60

    Surrogate Uncertainty:用外部代理模型估计黑盒VLM视觉定位不确定性

    论文提出 Surrogate Uncertainty 方法,用外部代理贝叶斯模型估计黑盒视觉语言模型在视觉定位中的逐查询不确定性,并分解为偶然与认知两部分。该方法通过跨输入模态的分层检索构建紧凑联合空间邻域,可结合保形预测或基于模型的规划实现主动视觉定位。作者称在多个定位基准和先进VLM上校准与任务表现均有提升,并在真实 Fetch 机器人上按开放世界指令在自信行动与信息收集间做取舍。

    推荐理由:论文把黑盒VLM的视觉定位不确定性交给外部代理贝叶斯模型估计,并在真实Fetch机器人上验证主动定位的取舍。

  6. arXiv · cs.RO63

    Teaching a Tree to Recover:在线蒸馏LLM监督者并用反事实回放训练决策树

    论文提出将LLM监督者在线蒸馏为决策树,并用反事实回放为每次训练回合后的恢复动作打上必要、不必要或有害的标签,以淘汰无用规则。在仿真中20个仅靠MPC会卡住的未见布局上,该决策树在所有随机种子下至少正确处理18个,或到达目标,或在无可行路径时求助。其表现与始终查询LLM的监督者和专家设计规则相当,且测试时不发起任何LLM查询。

    推荐理由:论文把LLM监督者在线蒸馏成决策树,用反事实回放标注恢复动作,为移动机器人卡死问题提供可迁移的监督设计思路。

  7. arXiv · cs.RO67

    Kinematic-Tactile Aligned Dexterous Retargeting with Contact Wrench Space Alignment:基于接触力旋量空间对齐的运动学-触觉灵巧重定向

    Xinyuan He 等提出一个分层三阶段框架,用于运动学与触觉对齐的灵巧手重定向,以物体为中心的接触力旋量空间作为人手与机械手之间的触觉对齐物理表示。框架先对齐手部运动学与接触几何,再根据触觉力与接触几何构建人手力旋量支撑剖面,随后优化机器人指尖力目标以覆盖该支撑并转换为关节位置修正,得到可直接回放的机械手轨迹。

    推荐理由:论文提出以物体接触力旋量空间对齐人手与机械手触觉信息的三阶段重定向框架,并在实机倒水任务中报告96.7%回放成功率。

  8. arXiv · cs.RO68

    SimTO-Robust:面向抓取位姿与物体几何鲁棒的软体夹爪自动设计

    SimTO-Robust 提出一种仿真驱动拓扑优化方法,通过模拟多物体、多位姿抓取并聚合接触力来指导软体夹爪形态优化。研究生成 6,646 个设计,并实机评测其中 24 个,与 10 个专用 SimTO 设计、两个刚性基线夹爪及一个常规拓扑优化通用软体夹爪对比。

    推荐理由:论文把多物体、多抓取位姿纳入拓扑优化,并给出37个夹爪的实机抓取对比,可作为软体夹爪形态设计的方法参考。

  9. arXiv · cs.RO63

    PRIME W0:用世界模型物理先验增强具身操作的VLA框架

    PRIME W0 是一个分层条件流匹配框架,旨在让VLA模型不再只依赖当前观测,而是利用长时序上下文与VLM的分层表示。其设计包括从预训练VLM向自适应MoE动作专家逐层注入KV、通过异步世界模型子目标图像预测和DINOv2历史帧语义桥接实现动力学感知条件,以及采用协方差结构化噪声的Action Dynamic Manifold流匹配。

    推荐理由:论文提出分层条件流匹配框架,用世界模型子目标预测与历史帧语义桥接补足VLA的时序上下文,并给出消融验证。

  10. arXiv · cs.RO71

    EvoLife:融合混合动作空间与持久记忆的终身具身导航框架

    作者提出统一导航框架 EvoLife,让多模态具身智能体自行选择移动方式、何时提问以及保留哪些经验。其混合动作空间支持航点导航、局部离散调整、像素级导航和物体导向导航,主动交互允许智能体在遇到歧义或困难时寻求澄清或帮助,持久空间记忆把观察和对话绑定到地点。

    推荐理由:论文提出统一导航框架 EvoLife,把混合动作空间、主动求助与持久空间记忆放在同一系统中,并给出多基准评测结果。