跳到正文
Hacker News· medbar·· 3 小时前AI 评分55

Anthropic 等提出 GRAFT:把奖励黑客行为定位到可移除参数而非惩罚

Reducing Reward Hacking by Localizing Bad Behavior Instead of Penalizing It

AI 导读

Anthropic 等机构研究者提出 GRAFT(Gradient Routing Adapter Fine-Tuning),在检测到奖励黑客轨迹时只更新 FORGET 适配器,训练后移除该适配器以消除不良行为。

来源:Hacker News · alignment.anthropic.com