实验:循环Transformer是否真用推理链
热点事件持续更新
实验:循环Transformer是否真用推理链
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
一项针对循环 Transformer 的实验发现,Huginn-0125 会实际使用自己写出的推理链:在 100 道合成算术题上,向推理链注入错误数字后,模型几乎全部跟随错误值给出错误答案,忽略错误的比例为 0。 实验还对比了 Huginn-0125 在 8/16/32/64 次循环下的表现与同规模常规模型 Qwen2.5-3B-Instruct,后者忽略错误的比例同样为 0。
AI 根据报道生成 · 55 分钟前更新
最新进展10月17日 05:54
循环 Transformer 会写出自己并不使用的推理吗?Huginn 实验探究报道时间线
沿着报道,了解事件的不同侧面。
10月17日
- Hacker News循环 Transformer 会写出自己并不使用的推理吗?Huginn 实验探究
一项针对循环 Transformer 的实验发现,Huginn-0125 会实际使用自己写出的推理链:在 100 道合成算术题上,向推理链注入错误数字后,模型几乎全部跟随错误值给出错误答案,忽略错误的比例为 0。实验对比了 Huginn-0125 在 8/16/32/64 次循环下的表现与同规模常规模型 Qwen2.5-3B-Instruct,后者忽略错误的比例同样为 0。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。