跳到正文
HuggingFace Daily Papers· Bryce Grant, Xijia Zhao, Peng Wang·· 6 天前精选AI 评分70

视觉-语言-动作模型的机制性研究:特征并非平等创建

Not All Features Are Created Equal: A Mechanistic Study of Vision-Language-Action Models

AI 导读

研究人员开发了解释性管道研究视觉-语言-动作(VLA)模型的计算机制,发现模型编码的任务指令与绝对工作空间坐标绑定,导致对物体位置微小变化敏感。研究团队发布了Action Atlas平台,包含520+训练好的SAEs、79个识别概念和评分的UR10e回放数据。

推荐理由

通过激活注入揭示视觉-语言-动作模型对绝对坐标的依赖,解释了为何物体位置微小变化就导致任务失败。

来源:HuggingFace Daily Papers · arxiv.org