跳到正文
热点事件持续更新

D&A解耦描述与评估,让VLM做零样本奖励模型

1 篇报道1 个报道来源7 小时前更新

先了解这件事

AI 综述

Marius Memmel等作者提出D&A(Describe & Assess)方法,把视觉语言模型(VLM)的机器人任务进度估计拆成两步:先对场景动态做客观、任务相关的文本描述,再按显式评分标准打分。作者称,该方法要求VLM在打分前先给出绝对成功的文本定义,把评估锚定到外部全局标准,而非视频内部时间线。 作者称实验显示,D&A能校准零样本估计、缓解确认偏差,给出细粒度部分进度指标,在失败执行上准确扣分、在成功执行上正确插值。作者还称,由于纯基于提示词,D&A可跨任务、跨本体和跨基准泛化,效果匹配或超过经过后训练的奖励模型,其奖励估计可用于下游强化学习。 论文为arXiv预印本,尚未经同行评议;上述效果均为作者自述,未经独立验证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv · cs.RO精选
    D&A:解耦描述与评估,让VLM成为零样本机器人奖励模型

    作者提出D&A(Describe & Assess)方法,将视觉语言模型的机器人任务进度估计解耦为两步:先对场景动态做客观、任务相关的文本描述,再用显式评分标准进行评估。该方法要求VLM在打分前先给出绝对成功的文本定义,从而把评估锚定到外部全局标准,而非视频内部时间线。作者称实验表明该方法能校准零样本估计、缓解确认偏差,给出细粒度部分进度指标,在失败执行上准确扣分、在成功执行上正确插值;由于纯基于提示词,D&A可跨任务、跨本体和跨基准泛化,效果匹配或超过经过后训练的奖励模型,其奖励估计还能用于下游强化学习。论文为arXiv预印本,尚未经同行评议。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。