跳到正文
热点事件持续更新

研究:语言模型能检测并定位自身激活扰动

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Damiano Fornasiere 等研究者发布的论文称,语言模型能检测、定位并在一定程度上描述施加于其激活值上的语义无关扰动。 研究对 Gemma、Llama、Mistral、Olmo、Qwen 和 Seed 家族 8B 至 36B 的八个模型施加 dropout 或高斯噪声,多数模型能以近乎完美的准确率完成检测与定位。Olmo 模型在预训练中形成该能力;Qwen3-32B 与 Qwen3.8-27B 零样本识别扰动类型的准确率与扰动强度相关。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. Hacker News
    研究发现 LLM 能识别并定位其激活值上的 dropout 与高斯噪声

    研究显示,语言模型能检测、定位并在一定程度上描述施加于其激活值上的语义无关扰动。作者对 Gemma、Llama、Mistral、Olmo、Qwen 和 Seed 家族 8B 至 36B 的八个模型施加 dropout 或高斯噪声,多数模型能以近乎完美的准确率完成检测与定位。Olmo 模型在预训练中形成该能力,Qwen3-32B 与 Qwen3.8-27B 识别扰动类型的零样本准确率与扰动强度相关。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。