跳到正文
热点事件持续更新

实验:循环Transformer是否真用推理链

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

一项针对循环 Transformer 的实验发现,Huginn-0125 会实际使用自己写出的推理链:在 100 道合成算术题上,向推理链注入错误数字后,模型几乎全部跟随错误值给出错误答案,忽略错误的比例为 0。 实验还对比了 Huginn-0125 在 8/16/32/64 次循环下的表现与同规模常规模型 Qwen2.5-3B-Instruct,后者忽略错误的比例同样为 0。

AI 根据报道生成 · 55 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月17日
  1. Hacker News
    循环 Transformer 会写出自己并不使用的推理吗?Huginn 实验探究

    一项针对循环 Transformer 的实验发现,Huginn-0125 会实际使用自己写出的推理链:在 100 道合成算术题上,向推理链注入错误数字后,模型几乎全部跟随错误值给出错误答案,忽略错误的比例为 0。实验对比了 Huginn-0125 在 8/16/32/64 次循环下的表现与同规模常规模型 Qwen2.5-3B-Instruct,后者忽略错误的比例同样为 0。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。