CLAP:不改骨干把预训练VLM直接转为VLA
热点事件持续更新
CLAP:不改骨干把预训练VLM直接转为VLA
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Yuri Ishitoya等作者提出CLAP(Causal Language-Action Prediction),在每个数值动作序列前加上自然语言动作描述,让动作token预测以语言-动作规划为因果条件,从而在不修改骨干架构的情况下把预训练VLM直接转为VLA。作者称,2B版本仅训练4-5小时即在LIBERO上达到90.8%,比VLA-0高14.9个百分点,并在LIBERO-PRO的语言、物体和空间扰动下更稳健;消融实验将增益归因于动作接地的语言语义。 作者还称,在真实UR5e机器人上,2B CLAP成功率为60%,匹配的VLA-0为15%。团队以0.8B、2B、4B三个规模开源开放权重模型,均出自同一VLM谱系。该工作已被CoRL 2026接收,上述指标为作者自报,尚未见独立验证。
AI 根据报道生成 · 1 小时前更新
最新进展11月4日 13:00
CLAP:通过语言-动作接地实现 VLM 到 VLA 的直接适配报道时间线
沿着报道,了解事件的不同侧面。
11月4日
- arXiv · cs.RO精选CLAP:通过语言-动作接地实现 VLM 到 VLA 的直接适配
CLAP(Causal Language-Action Prediction)提出在每个数值动作序列前加上自然语言动作描述,让精确动作 token 预测以语言-动作规划为因果条件,从而在不修改骨干架构的情况下把预训练 VLM 直接转为 VLA,缓解动作 token 偏离语言分布的问题。2B 版本仅训练 4-5 小时即在 LIBERO 上达到 90.8%,比 VLA-0 高 14.9 个百分点,并在 LIBERO-PRO 的语言、物体和空间扰动下更稳健;消融实验将增益归因于动作接地的语言语义。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。