跳到正文
热点事件持续更新

多项基准显示公开 Agent 技能多数无效

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

一名作者称,他在阅读 Jakob Breu 的观点后删除了自己全部 Agent 技能,理由是多项基准显示公开技能大多无效。 他援引 SWE-Skills-Bench 的结果:测试 98 个公开技能,其中 92 个对编码任务结果无显著影响,平均通过率从 76.6% 变为 76.9%;网页开发类技能让结果略差,token 成本增加 72% 到 394%。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月8日
  1. Hacker News
    我删光了所有 Agent 技能:多项基准显示公开技能多数无效

    作者在阅读 Jakob Breu 的观点后删除了自己全部 Agent 技能,并援引证据:SWE-Skills-Bench 测试 98 个公开技能,其中 92 个对编码任务结果无显著影响,平均通过率从 76.6% 变为 76.9%;网页开发类技能让结果略差,token 成本增加 72% 到 394%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。