跳到正文
Hacker News· nharada·· 5 小时前AI 评分74

Preference Model 审计 Terminal Bench 4:65 个任务中 60 个存在问题

Terminal Bench 4 Is Saturated

AI 导读

Preference Model 审计 Terminal Bench 4 的 65 个任务后发现,60 个任务至少存在一个问题:44 个可被作弊通过,41 个按指令未明确写出的规则评分。

来源:Hacker News · preferencemodel.com