Hacker News· thinkingemote·· 2 小时前AI 评分39
为什么所有 LLM 都痴迷日本文化?
Why are all LLMs Obsessed with Japanese Culture? [pdf]
AI 导读
一项基于 Culture-Related Open Questions(CROQ)数据集的研究发现,LLM 在回答通用文化问题时明显倾向日本等国家,这与以往文化偏见研究的结论相反。该数据集的问题覆盖 24 种语言,用英语等高资源语言提问时模型输出更多样,低资源语言则更倾向指向该语言为官方语言的国家。研究还发现这种文化偏好在监督微调后首次显现,而非预训练阶段。
来源:Hacker News · arxiv.org