跳到正文

技术方向

人形机器人 最新动态

与机器人感知、决策和物理交互直接相关的人形机器人进展

40 条精选近 30 天 39 条共收录 79 条

更新

精选归档 · 第 2 页

10月22日周四第 21–40 条
  1. arXiv · cs.RO71

    RISE:面向感知型人形机器人跌倒恢复的测试时运动引导方法

    Osher Azulay 等人提出 RISE,一种让任务目标在推理阶段引导人形机器人起身方式的方法。该方法先学习连接预期动作与电机动作的恢复动作词表,再由视觉扩散规划器预测未来身体状态,并用任务代价把预测导向指定朝向、起身速度或路径,无需重新训练即可在测试时改变动作。仿真实验展示了多样化恢复、地形适应和测试时引导,并在宇树 G1 上给出实机演示。

    推荐理由:论文提出在推理阶段用任务代价引导人形机器人跌倒后起身的动作选择,并给出仿真实验与宇树 G1 实机演示。

  2. arXiv · cs.RO67

    SP-HLM:以稀疏姿态驱动的人形机器人移动操作运动生成与全身控制框架

    作者提出 SP-HLM,一个基于稀疏姿态接口的人形机器人移动操作框架,用五个任务关键身体姿态结合学习到的隐式运动先验,分别表达空间意图与全身协调。其中 SP-VLA 从多模态观测和语言指令预测稀疏姿态与手指关节位置,SP-MGM 经两阶段蒸馏实时重建全身运动,SP-GMT 再结合显式稀疏目标与隐式运动先验做全身控制。

    推荐理由:论文提出以稀疏姿态作为高层策略与全身控制的接口,并给出仿真与实机验证,可供研究人形移动操作接口设计时参考。

10月21日周三
  1. arXiv · cs.RO71

    HuMiT:基于紧凑参考跟踪的低延迟人形机器人全身遥操作

    HuMiT 提出一种人形机器人全身遥操作方案,其统一跟踪策略只需当前帧的根高度、根速度与四个稀疏关键点的 SE(3) 位姿作为紧凑参考,无需完整关节位置、密集身体变换或未来帧。作者报告头显流式传输到策略输出的通信至推理时延约 20 ms,基于视频的光流时延中位数为 65 ms。系统在 Unitree G1 人形机器人上验证,展示了接住抛来球体等快速反应和协调的移动操作能力。

    推荐理由:论文给出仅需稀疏关键点参考的全身遥操作策略,并报告头显到策略输出的时延数据,可供比较遥操作管线设计。

  2. arXiv · cs.RO75

    Watch Your Step:用落脚点预测裁剪感知输入的人形机器人运动策略

    arXiv 论文 Watch Your Step 提出预期感知方法,用轻量落脚点预测模型(FPM)仅凭本体感知和速度指令预测未来落脚点,再只在这些落脚点周围采样高程图小块,替代完整机器人中心高程图输入。

    推荐理由:论文提出用落脚点预测裁剪高程图输入,训练迭代约为完整地图的三分之一,并零样本迁移到 Unitree G1 实机。

  3. arXiv · cs.RO67

    SMR:从人类语义学习人形机器人流式运动重定向

    SMR 提出一种流式神经运动重定向器,从语义条件物理专家学习,将人类运动转为人形机器人可执行的运动参考。方法先把人类运动转换为机器人感知的任务空间目标,由物理专家在仿真中于接触、动力学和执行器约束下跟踪,再用严格因果的 Transformer 学习其执行状态轨迹。

    推荐理由:论文提出从语义条件物理专家学习流式重定向,对比运动学与物理精修基线,可供人形机器人运动参考生成研究比较。

  4. arXiv · cs.RO71

    REACT:用VLM引导接触重定向学习人形机器人交互策略

    REACT 是一个从人人演示中学习可部署人形机器人交互策略的框架,把语义接触结构作为连接演示处理、交互学习与机载控制的监督信号。其中 VLM 引导的接触建模与重定向流程识别人人交互中的语义接触并迁移到人形机器人几何上,特权交互策略借助接触奖励学习行为后,被蒸馏为仅用机载传感的自我中心深度策略,并引入生成式伙伴状态建模以应对遮挡。

    推荐理由:论文给出从人到人形机器人接触迁移并蒸馏为机载深度策略的完整流程,附仿真与Unitree G1实机结果。

  5. arXiv · cs.RO88

    SuperMimic:用单一可微世界模型扩展人形机器人全身控制

    SuperMimic 提出用单一可微世界模型摊销人形机器人全身运动跟踪的学习,世界模型与跟踪策略在同一循环中联合训练,并通过短时想象 rollout 的反向传播为策略提供解析梯度。

    推荐理由:论文用单一可微世界模型摊销多动作学习,给出与基线在GPU耗时和失败动作数上的对比,并报告在Unitree G1上的迁移。

  6. arXiv · cs.RO75

    FRDV:面向可扩展人形机器人学习的快速运动重定向流程

    作者提出 FRDV(Fast Retargeting with Dynamics Validation),一个由快速约束运动学重定向和动力学校验两阶段组成的人形机器人运动重定向框架。

    推荐理由:论文给出快速运动重定向与动力学校验两阶段流程,并对比 GMR、ProtoMotions 的跟踪成功率,可供人形机器人学习数据管线参考。

10月20日周二
  1. arXiv · cs.RO67

    EmbodyHOI:面向人形灵巧操作的具身感知手物交互生成

    EmbodyHOI 在冻结的流匹配手物交互轨迹生成器采样循环中嵌入针对特定人形本体的可微逆运动学求解器,把本体可达性约束加入生成过程。在 ARCTIC 轨迹上,该方法把 Unitree G1 与 H1-2 的重定向腕部误差从 8.9 cm 降到 0.6 cm,同时保持文本到手物交互的生成质量。

    推荐理由:论文把机器人可达性约束放进 HOI 轨迹生成采样过程,并给出 G1 与 H1-2 的实机前仿真对比数据。

  2. arXiv · cs.RO75

    Ropedia W0 发布跨本体移动操作世界模型,基于人类经验数据

    Ropedia W0 是作者提出的第一视角移动操作世界基础模型,覆盖人类与多种机器人本体。其 Xp-Data 包含 1 万小时第一视角人类数据和 3 千小时机器人数据,并配有统一多模态标注;模型用相机位姿编码移动、用投影骨架编码操作。

    推荐理由:该工作构建跨人类与机器人的第一视角移动操作世界模型,并公开数据规模与五项基准评测结果,可供比较世界模型路线。

10月19日周一
  1. arXiv · cs.RO67

    ReInsVLN:免训练视觉语言导航复用历史观测,R2R Val-Unseen 成功率提升 8.48 个百分点

    ReInsVLN 提出一种免训练框架,在冻结的导航器中构建并利用历史记忆,在 R2R Val-Unseen 上相较原生 StreamVLN 和 InternVLA-N1 成功率分别提升 8.48 和 3.37 个百分点,达到 64.27% 和 64.44%。

    推荐理由:论文提出免训练的历史证据复用框架,并给出在 R2R Val-Unseen 上的成功率提升与压缩带来的时延、显存收益。

  2. arXiv · cs.RO62

    RoboMMT:学习稳定跟踪调制后的表达性与交互性机器人动作

    RoboMMT 提出一种模块化控制架构,将参数化表达动作合成、基于物理的角色控制与面向空间交互目标的反应式适应耦合起来,训练一个参考条件跟踪策略在广泛表达域内保持动态稳定。

    推荐理由:论文给出耦合表达动作合成与物理角色控制的模块化架构,并对比了覆盖域不足的跟踪器失稳情况。

  3. arXiv · cs.RO66

    HS-MoDP:通过同构遥操作与独立技能路由实现人形机器人组合操作

    作者提出HS-MoDP,通过共享专家池上的独立语义路由,把分别演示的手臂技能组合起来,在Unitree G1上取得比基线更强的技能组合效果。为采集全身接触操作演示,团队开发了同构外骨骼G1Exo,对机械臂构型提供关节级直接控制。

    推荐理由:论文提出用同构外骨骼采集接触操作演示,并比较其与VR-IK遥操作对策略学习的影响,可供研究遥操作数据质量的人参考。

  4. arXiv · cs.RO67

    OmniInteract:面向双人形机器人全身交互的统一控制方法

    OmniInteract 提出面向双人形机器人全身物理交互的统一控制方法,通过表面接触感知重定向与可扩展残差策略学习应对人机形态差异和交互多样性增长带来的控制保真度下降。

    推荐理由:论文提出面向双人形机器人全身交互的统一控制方法,用表面接触感知重定向与残差策略分解应对形态差异和技能扩展。

  5. arXiv · cs.RO70

    SSIO:无需真值轨迹的自监督惯性里程计

    SSIO 提出积分自监督方案,让惯性里程计模型从零训练时不再依赖真值轨迹,只需标定 IMU 并在正常运行时记录数据。该方法先用短窗积分 IMU 的教师模型监督学生模型,学生直接预测速度且精度高于教师,再用多窗口位姿图蒸馏序列一致目标。在覆盖行人、无人机、四足机器人和人形机器人的六个数据集上,同一套无速度或位置标签的训练流程所得模型平均速度误差与同架构有监督基线相差 0.07 m/s。

    推荐理由:论文提出用短窗积分自监督替代真值轨迹训练惯性里程计,并在行人、无人机、四足和人形六套数据上验证。

  6. arXiv · cs.RO72

    SWAP:可测试时引导的人形机器人全身避障框架

    作者提出SWAP分层框架,将碰撞感知决策与稳定控制分离:高层扩散策略生成多模态避障动作提案,低层全身RL控制器跟踪提案并维持动态平衡。训练时通过事后标注在随机指令下滚动低层策略,把障碍物放在已执行动作未扫过的空间,从而构造无碰撞样本并重渲染感知。仿真和宇树G1实机实验显示对静态与动态障碍物均能可靠避障,测试时蒙特卡洛采样引导使速度、朝向或姿态等目标奖励平均提升34%,同时保持较高避障率。

    推荐理由:论文提出分层框架,用扩散策略生成避障动作、RL控制器保持平衡,并在宇树G1实机上验证。

  7. arXiv · cs.RO60

    研究验证人形机器人能否按人类运动发育量表学习站立行走技能

    Fanxing Meng 与 Jing Xiao 的预印本研究把人婴幼儿运动发育量表表示为发育图,并在强化学习框架中训练人形机器人按量表描述的自然阶段学习粗大运动技能。结果显示,四套常用儿科运动量表中三套导出的图能成功引导机器人习得这些技能;第四套因缺少其他量表具有的部分中间里程碑而出现失败,补上缺失里程碑后也能成功。研究据此评估哪些量表足以作为发展到站立和行走的完整指南。

    推荐理由:研究把四套婴幼儿运动发育量表转成发育图并用于强化学习训练人形机器人,可比较各量表作为技能训练指南的完整性。

10月18日周日
  1. arXiv · cs.RO66

    HumanoidPose:仅凭视频估计人形机器人全身位姿

    Jiaxi Jiang 等提出 HumanoidPose 框架,把视觉当作本体感知,仅从视频恢复人形机器人在世界空间中的全身关节配置。该方法将预训练人体姿态特征与机器人运动学结合,并把人体动作重定向到十六种人形机器人本体,从而完全用合成数据学习;还通过自训练利用无标注在线视频训练 2D 机器人姿态检测器。

    推荐理由:论文提出仅凭视频恢复人形机器人全身关节配置的框架,并在三个真实平台上与基线比较误差。

10月1日周四
  1. Boston Dynamics Blog72
    Boston Dynamics Blog的报道配图

    Boston Dynamics 发布 Atlas 新一代 13 自由度机械手

    Boston Dynamics 发布 Atlas 机器人新一代手部,自由度从上一代 GR2 的 7 个提升到 GR3 的 13 个,采用四指设计并取消小指。新手指尖和手掌覆盖密集压力触觉传感器,尺寸接近偏大的人手,强度与上一代相当,可搬运装载 100lb 以上的迷你冰箱。

    推荐理由:Atlas 新一代手把自由度、可仿真性和工具使用能力放在同一套设计取舍里,可与上一代七自由度手直接对照。

9月17日周四
  1. Figure News88
    Figure News的报道配图

    Figure 发布 Helix 2.5:在 30 个未见家庭零样本完成全身家务

    Figure 发布 Helix 2.5,在 30 个湾区未见家庭中零样本完成整理客厅、叠毛巾、铺床三类全身长程任务,这些环境与操作对象均未采集数据、未做微调或适配。

    推荐理由:Figure 公布 Helix 2.5 在 30 个未见家庭零样本完成三类全身任务,并给出 Index 预训练消融与数据缩放规律。