跳到正文

NEWS / 动态

#仿真

按时间浏览,使用右上角筛选切换领域。

10月21日周三
  1. arXiv · cs.RO67

    SMR:从人类语义学习人形机器人流式运动重定向

    SMR 提出一种流式神经运动重定向器,从语义条件物理专家学习,将人类运动转为人形机器人可执行的运动参考。方法先把人类运动转换为机器人感知的任务空间目标,由物理专家在仿真中于接触、动力学和执行器约束下跟踪,再用严格因果的 Transformer 学习其执行状态轨迹。

    推荐理由:论文提出从语义条件物理专家学习流式重定向,对比运动学与物理精修基线,可供人形机器人运动参考生成研究比较。

  2. arXiv · cs.RO60

    研究:物理参数偏移下的因果世界模型

    该预印本研究了物理条件偏离训练分布时世界模型预测精度下降的问题,区分了预测器可用哪些输入以及机制如何计算这些输入的影响两个层面。在带捷径特征的合成基准中,由配对干预得到的冻结依赖掩码把分布外 RMSE 从全连接预测器的 1.769 降至 0.697,接近生成器 oracle 掩码的 0.694。

    推荐理由:论文在 CausalWorld 中比较不同质量参数注入方式对分布外预测的影响,为世界模型的因果结构设计提供可迁移思路。

  3. arXiv · cs.RO63

    SLoSa:面向机器人任务规划的小尺寸低功耗安全基础模型

    SLoSa 是一个神经符号压缩与微调框架,用于训练小尺寸、低功耗且具备安全意识的机器人任务规划基础模型。该框架先用经典规划器、教师大模型和形式化验证器构建安全数据集,再经监督微调与由验证奖励机引导的强化学习微调。

    推荐理由:论文给出小尺寸规划模型在 PDDL 任务、家用仿真与桌面机械臂上的成功率与功耗数据,可对照大模型本地部署的资源约束。

  4. arXiv · cs.RO71

    GGraph:面向机器人部署与学习的 GPU 加速图库开源发布

    Yash Rampuria 等作者提出开源 GPU 加速图库 GGraph,同时支持真实机器人部署和大规模策略训练。GGraph 通过 ROS 2 接口接入真实机器人,并支持向量化 GPU 策略训练,内置 3-D 导航、探索和回环整合等任务。单机器人运行时图更新为毫秒级,规模化训练可跨数百个并行机器人,训练实际耗时降低一个数量级;结果来自仿真与真实世界实验。

    推荐理由:GGraph 把图构建放到 GPU 上,并同时覆盖 ROS 2 部署与并行训练,为图表示机器人策略提供可复用基础设施。

  5. arXiv · cs.RO60

    HyperDrone:每秒数百万帧的四旋翼仿真到现实迁移

    HyperDrone 是一个面向高性能批量渲染的四旋翼仿真器,作者称其速度超过现有先进批量四旋翼仿真器 20 倍以上。它结合优化的多旋翼动力学与光线追踪引擎 HyperLux,支持 Nvidia OptiX、Vulkan、Apple Metal 和 WebGPU 后端,可渲染 RGB、深度、语义/实例分割、表面法线和光流,并在消费级 GPU 上达到数百万帧每秒。

    推荐理由:论文给出比现有批量四旋翼仿真器快 20 倍以上的渲染方案,并把纯仿真训练的偏航控制策略迁移到 Crazyflie 实机。

  6. arXiv · cs.RO67

    AdaDex:用混合灵巧模仿学习可泛化灵巧操作技能

    AdaDex 是一个目标条件强化学习框架,能把数秒的单条手-物轨迹(来自动捕或野外 RGB(D) 视频的 HOI 重建)转化为可泛化的灵巧技能。其核心 Hybrid Dexterous Mimicking 在两类大规模并行环境上训练共享策略:密集运动跟踪环境注入人类先验,带噪声初始状态与稀疏物体成功奖励的泛化环境迫使技能脱离参考轨迹。

    推荐理由:论文提出混合模仿与目标条件强化学习框架,把数秒人手轨迹转成可泛化的灵巧操作技能,并给出跨仿真器与实机迁移结果。

  7. arXiv · cs.RO60

    Industrial ReMEmbR 将时空记忆扩展到机器人车队

    IndustrialRemembr 提出面向机器人车队的共享时空记忆系统,扩展 NVIDIA ReMEmbR,仅在需要时生成场景描述以降低服务端计算。每台机器人用 NVIDIA Jetson 将视频片段编码为检索嵌入、视觉 token 和重建潜变量,不上传原始相机画面。

    推荐理由:论文给出机器人车队共享时空记忆的端侧编码与按需解码方案,并报告缓存 token 解码与未拆分模型输出一致。

  8. arXiv · cs.RO71

    SceneRig:从单张图像重建可仿真3D场景的智能体系统

    SceneRig 是一个智能体系统,可将单张图像重建为可编辑、可直接用于仿真的3D场景。它结合几何、视觉与物理工具,并在物理仿真器内执行编辑与验证循环以获得物理稳定性。作者称,相比基线方法,SceneRig 在实例分割、物体外观和3D摆放上有所改善,其场景能更准确地预测真实机器人策略结果,并更可靠地支持已录制操作在无需轨迹适配的情况下回放。

    推荐理由:论文提出从单张图像重建可仿真场景的智能体系统,并给出下游机器人策略预测与操作回放的对比结果。

  9. arXiv · cs.RO67

    CLOSER:面向具身物体目标导航的证据感知主动视觉验证框架

    CLOSER提出证据感知的主动验证框架,把物体目标导航中的停止决策当作闭环证据采集,将视觉语言模型验证与主动感知结合。该框架微调开源VLM,把候选目标在各帧的视图标注为目标、非目标或不确定,用基于嵌入的多样性门控挑选互补视图,再由轻量网络融合各视图概率;若融合判断仍不确定,扩散策略仅依据跟踪掩码和深度驱动智能体靠近候选目标,直到判断明确。

    推荐理由:论文把停止决策改写为闭环证据采集,用VLM多视角验证加扩散策略主动靠近,为ObjectNav误检问题提供可迁移方法。

  10. arXiv · cs.RO75

    FRDV:面向可扩展人形机器人学习的快速运动重定向流程

    作者提出 FRDV(Fast Retargeting with Dynamics Validation),一个由快速约束运动学重定向和动力学校验两阶段组成的人形机器人运动重定向框架。

    推荐理由:论文给出快速运动重定向与动力学校验两阶段流程,并对比 GMR、ProtoMotions 的跟踪成功率,可供人形机器人学习数据管线参考。

10月20日周二
  1. arXiv · cs.RO60

    研究揭示驾驶 VLA 的感知-动作绑定缺口,并提出冻结采样器引导修复

    研究指出,推理增强的驾驶 VLA 能感知并推理安全关键危险,却未能把危险信息转化为安全动作,作者将这一现象称为感知-动作绑定缺口。基于匹配的仿真反事实和驾驶日志回放,研究发现路径内危险确实被编码进视觉表征,但纵向规划主要由自车速度历史主导,对危险距离和模型自身推理轨迹响应很弱。

    推荐理由:论文用匹配仿真反事实与实车日志回放,把驾驶 VLA 的危险感知与制动控制分开诊断,并给出不改权重的生成时引导方案。

  2. arXiv · cs.RO63

    GPL:为视觉-语言-动作模型引入生成式计划隐变量

    作者提出生成式计划隐变量(GPL),把VLA的推理状态表示为对计划(如选哪个物体、抓取或路线)的低维条件分布,使计划可采样、可按请求选择、可按部署结果重加权,且无需重新训练VLA。

    推荐理由:论文把VLA的推理状态建模为可采样的计划分布,并在仿真操作任务上对比了计划引导与动作分布引导的差异。

  3. arXiv · cs.RO20

    HAKUTO 微型月球探测车飞行模型热控策略设计与实现

    针对 HAKUTO 月球探测车飞行模型(FM),研究将其划分为六个辐射面建立分析热模型,依据朝向太阳辐射通量及月球辐射、太阳反照率、月壤传导等因素确定表面温度,并据此选定航电设备安装位置与太阳翼角度,在整备质量低于 4 kg 的前提下兼顾热性能与发电。初步分析后开展数值仿真,并在真空环境中通过热平衡试验验证设计。

  4. arXiv · cs.RO71

    DirectWAM:将世界-动作模型蒸馏为单步预测的机器人控制方法

    DirectWAM 通过动作充分蒸馏把预训练视频与动作专家转为单步预测器,在 LIBERO 四个套件平均成功率 97.1%、RoboTwin 2.0 上 85.4%,推理延迟较完整迭代教师降低 28.0 倍。

    推荐理由:论文分析世界-动作模型中视觉预测误差对动作的影响,提出单步蒸馏方法,并给出仿真基准与实机任务结果。

  5. arXiv · cs.RO58

    中断感知循环强化学习提升UAS导航在临时接管后的安全性

    论文研究UAS在远程飞行员或机载避撞系统临时接管后交还控制权时,循环强化学习策略的性能退化问题。基准测试显示中断会使任务变量更难从循环隐藏状态中解码,并提高中断后碰撞风险。作者提出三种中断感知架构,在仿真中均比标准循环策略保留更多可解码任务信息,其中最强架构相对循环基线将中断后碰撞减少74%、中断导致的任务失败减少69%,且未降低无中断时的性能。

  6. arXiv · cs.RO58

    PointHand研究:遥操作手部关键点渲染如何影响新手演示与策略学习

    研究提出遥操作界面PointHand,将多指机器人手渲染为指尖与关节的稀疏关键点,并在仿真杯子入盒任务中比较三种渲染方式。18名新手与4名专家共采集2200次试验,看到拇指与食指被强调的新手在600次试验中获得441次成功演示,而看到真实手形的新手为320次。

  7. arXiv · cs.RO71

    枚举引导训练神经 Hamilton-Jacobi 安全证书

    作者提出一种验证引导的训练框架,用安全约束的概率枚举检测前向不变性违规,生成比标准对抗攻击方法更精确刻画失败边界的反例集。用该表示微调预训练的 HJ 值函数,在所有测试基准上得到更大的认证区域并缩短认证时间。作者还基于精炼后的证书设计部署期屏蔽机制,在基于物理的 Isaac Sim 环境和真实自主竞速实验中,相比标称控制器和基于线性二次调节(LQR)的备份策略实现零安全约束违规。

    推荐理由:论文把安全约束枚举用于微调神经 HJ 证书,并在 Isaac Sim 与实车竞速中对比标称控制器和 LQR 备份策略。

  8. arXiv · cs.RO62

    RoboCasa-Shift:面向长程家务操作 VLA 策略的分阶段鲁棒性评测基准

    作者提出 RoboCasa-Shift,一个基于 RoboCasa365 的诊断性鲁棒性基准,结合受控单因素扰动、共享相同设置仅目标扰动不同的配对干净-扰动 rollout,以及仿真中的分阶段诊断。

    推荐理由:该预印本提出基于 RoboCasa365 的分阶段鲁棒性评测,用配对 rollout 揭示聚合成功率掩盖的执行差异。

  9. arXiv · cs.RO58

    AWLS:面向单步生成式机器人操作策略的优势加权潜空间引导

    作者提出 AWLS,一种针对冻结的单步生成式机器人操作策略的离线后训练方法,在不更新解码器的情况下学习观测条件化的潜噪声残差修正。该方法以优势加权动作重建目标训练该残差噪声整形器,优势值经分离和尺度归一化后仅作为示教动作的监督权重,避免使用 critic 梯度更新策略并保留单步推理。

  10. arXiv · cs.RO42

    RLTrajGen-PPMPC-CBF:面向自动驾驶车辆环岛导航的预设性能引导安全强化学习框架

    研究提出分层框架RLTrajGen-PPMPC-CBF,用预设性能约束(PPC)调节强化学习规划与MPC控制之间的耦合,并以控制屏障函数(CBF)层提供实时安全修正并反馈至RL过程。在MetaDrive仿真环境中,该方法相比最优基线平均成功率提升6.25%,运动病剂量值(MSDV)降低65.87%,同时加快训练收敛。

  11. arXiv · cs.RO60

    经验记忆何时帮助闭环 LLM 驾驶智能体:受控评测揭示热启动池与 token 对照的影响

    研究在单一经审计的 HighwayEnv 测试台(1Hz,决定性对比使用 gpt-4o-mini)上受控评测经验记忆对闭环 LLM 驾驶智能体的作用,将热启动池视为重采样随机因子(十个不相交池)并加入 token 匹配的无关填充对照。

    推荐理由:在单一 HighwayEnv 测试台上用重采样热启动池与 token 匹配对照,检验经验记忆对闭环 LLM 驾驶智能体的增益是否稳健。

  12. arXiv · cs.RO62

    PanoGraphGS:用高斯泼溅统一全景分割与分层3D场景图

    PanoGraphGS 提出一个统一框架,将全景3D高斯表示学习与分层3D场景图构建结合,在共享高斯几何上学习语义与实例特征。其语义感知场景图模块可恢复楼层-房间-物品-物体的层级及包含与空间关系,并支持新视角全景分割与高斯级全景解码。

    推荐理由:论文把全景分割与分层3D场景图统一到高斯表示中,并给出与Replica、NaviGS的对比结果,可供场景图构建方法参考。

  13. arXiv · cs.RO67

    JARVIS:从视觉说明书到自主机器人装配的基准与智能体

    JARVIS 是一个无需额外语言指令、由视觉说明书引导自主装配的方法无关基准,包含 8,987 个场景中的 236,679 个 LEGO 装配任务,并从中整理出 50 个任务的 JARVIS-v1 套件用于交互式机器人评测。

    推荐理由:该预印本提出视觉说明书引导装配的基准与智能体方法,并给出九款模型在长程任务上的表现差异。

  14. arXiv · cs.RO71

    EchoNav:利用历史观测做证据式BEV补全的视觉导航框架

    EchoNav提出一种从短RGB序列预测证据式鸟瞰图(BEV)表示的视觉导航框架,结合时序聚合与占据补全,在最新自车坐标系下生成局部地图,无需深度或相机位姿输入,也不做显式几何变换。

    推荐理由:论文给出基于历史观测的证据式BEV补全方法,并在仿真与轮式机器人上对比基线成功率。

  15. arXiv · cs.RO64

    AIM:通过动作影响力最大化训练可控世界模型

    论文提出 Action Influence Maximization(AIM)算法,主动采集训练数据以提升数据集的动作影响力,从而改善动作条件世界模型对指令的响应。

    推荐理由:论文把动作条件视频模型忽略指令归因于训练数据的动作影响力上限,并给出主动采数据的改进方法,可用于理解世界模型可控性。

  16. arXiv · cs.RO58

    四足飞行机器人通过分离控制收缩度量实现多模态控制

    作者设计并运行了一种多模态四足飞行机器人,用控制收缩度量(CCM)构建统一控制框架。研究离线分别搜索行走与飞行的域特定收缩度量,再通过在线基于能量的CLF QP统一,实现跨域控制分配,并在仿真中展示。实验验证了硬件的机械可行性和推进器辅助小跑范式,作者称实验稳定性支持将该框架部署到多模态操作。

  17. arXiv · cs.RO67

    EmbodyHOI:面向人形灵巧操作的具身感知手物交互生成

    EmbodyHOI 在冻结的流匹配手物交互轨迹生成器采样循环中嵌入针对特定人形本体的可微逆运动学求解器,把本体可达性约束加入生成过程。在 ARCTIC 轨迹上,该方法把 Unitree G1 与 H1-2 的重定向腕部误差从 8.9 cm 降到 0.6 cm,同时保持文本到手物交互的生成质量。

    推荐理由:论文把机器人可达性约束放进 HOI 轨迹生成采样过程,并给出 G1 与 H1-2 的实机前仿真对比数据。

  18. arXiv · cs.RO60

    Jetson AGX Orin 深度估计器基准:九类单目与立体方法对比

    作者在 Jetson AGX Orin 上对九类深度估计模型做了基准测试,覆盖单目 Depth Anything V2/V3、Depth Pro、MoGe-2、Metric3D v2、UniDepth V2 与立体方法 libSGM、NVIDIA ESS、Fast-FoundationStereo,按 Middlebury 2014 真值评估度量精度、GPU 时间、能耗和许可。

    推荐理由:在 Jetson AGX Orin 上统一比较九类深度估计模型的精度、速度、能耗与许可,为机器人感知选型提供可复现依据。

  19. arXiv · cs.RO74

    GPT-6 Astra 被验证可直接使用视触觉图像完成接触密集操作

    作者在 arXiv 预印本中报告,GPT-6 Astra 可直接解读基于视觉的触觉图像,并通过其现有视觉接口在 19 个仿真 UniVTAC 与 OpenViTac 任务上实现少样本闭环控制,每个设置采样 210 个场景种子。

    推荐理由:论文在仿真触觉基准上比较通用多模态模型与专用策略,并给出视觉单独输入时的对照结果。