跳到正文
Hacker News· dbreunig·· 1 小时前精选AI 评分88

Astra 直接读写神经网络权重,修复 Qwen3.5-0.8B 推理循环

Astra can read and write weights to improve Qwen

AI 导读

研究团队发现 GPT-6 Astra 能直接读取和写入神经网络权重,并把这一方法称为 Weight-Space Programming。Astra 仅凭原始权重就能判断网络训练时玩的游戏、扩散模型生成的形状和语言模型训练语料,还能在无梯度、无训练的情况下从零写出击败 PPO 100M 步网络的 MinAtar 策略。

推荐理由

作者用八个实验展示通用 LLM 直接读写神经网络权重,其中对 Qwen3.5-0.8B 的定点修改把 MATH-500 从 7.9% 提到 48.1%。

来源:Hacker News · rikiyat.github.io