跳到正文
Hacker News· matt_d·· 3 小时前AI 评分34

一颗红心即递归:探究 VLM 的视觉意义与沟通

A Heart Means Recursion: Exploring Visual Meaning and Communication in VLMs

AI 导读

研究发现,红心等简单视觉符号能隐性影响 VLM 行为,使其在简单编程题上更倾向递归解法,而模型对符号的直接解读与思考轨迹同实际行为明显背离。在模型间的视觉沟通中,模型倾向发送自身和人类觉得直观的形状基元,但这些视觉线索往往无法引导其他模型,形成生成—解读鸿沟。在涉及抽象概念和故事的沟通游戏中,模型能创造性用视觉传递意义,部分沟通对人类并不直观。

来源:Hacker News · arxiv.org