研究提出TNAS诊断VLA文本与动作解耦

Zihao Feng等作者提出文本中性动作子空间（TNAS）诊断方法，发现视觉扰动可在推理VLA生成的理由逐字不变时改变其物理动作，即文本理由与动作解耦。该研究已被NeurIPS 2026接收。 在Alpamayo驾驶模型和InstructVLA操作模型上，局部最动作敏感方向与文本损失梯度近乎正交，范数重叠仅1.87%和5.28%；在相同隐状态扰动范数下，沿该方向干预对动作的偏移是文本梯度扰动的4.64倍至47.8倍。 在Alpamayo的154个带障碍物标注驾驶场景中，TNAS引导攻击在整图扰动下使52.6%的场景在理由逐字不变时引发新碰撞，局部前视相机补丁下为35.1%，未引导动作攻击为4.55%。在InstructVLA上，TNAS引导使文本漂移减少40.5%、85.0%的样例保持完全相同的回复，同时动作块偏移1.73单位。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。