DreamCan:用稀疏视觉规划衔接视频模型与机器人操作策略
DreamCan 提出一种分层策略,用预训练视频模型改造的高层规划器生成稀疏视觉子目标,再由低层视觉运动策略执行,从而把视频模型的可执行性约束进规划。作者从无动作的离线机器人视频中估计子目标的可达性与任务效用,并用动态规划自动选取子目标序列,无需人工标注。
推荐理由:论文提出用稀疏视觉子目标替代稠密视频预测的分层策略,并在 LIBERO-Long 与真实双臂任务上给出对比结果。
技术方向
与机器人感知、决策和物理交互直接相关的感知与规划进展
102 条精选近 30 天 101 条共收录 266 条
DreamCan 提出一种分层策略,用预训练视频模型改造的高层规划器生成稀疏视觉子目标,再由低层视觉运动策略执行,从而把视频模型的可执行性约束进规划。作者从无动作的离线机器人视频中估计子目标的可达性与任务效用,并用动态规划自动选取子目标序列,无需人工标注。
推荐理由:论文提出用稀疏视觉子目标替代稠密视频预测的分层策略,并在 LIBERO-Long 与真实双臂任务上给出对比结果。

NVIDIA 在 ROSCon 多伦多站发布 Isaac ROS 5.0,这是一组基于 ROS 的 GPU 加速软件包,新增面向 AI 智能体的开发工作流与平台支持。
推荐理由:Isaac ROS 5.0 的更新清单和多家厂商集成案例,可用于了解 ROS 生态中 GPU 加速与智能体工作流的落地方式。