跳到正文
热点事件持续更新

Allen AI 发布长上下文状态追踪基准 StateBench

2 篇报道2 个报道来源1 小时前更新

先了解这件事

AI 综述

Allen AI 在 Hugging Face 发布 StateBench,用于评估语言模型在长文档中跟踪实体信息变化的能力。该基准按 R-trivial、Aperiodic、Soluble、General finite 四级难度组织测试,并同步开放技术报告、数据和代码。 StateBench 关注的是:随着文档中实体信息不断更新,模型能否持续掌握这些信息的最新状态。

AI 根据报道生成 · 58 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. Hacker News
    Ai2 发布 StateBench,测试语言模型在长文档中的状态追踪能力

    Ai2 推出 StateBench,用于评测语言模型在长文档中追踪实体状态变化的能力,按 R-trivial、Aperiodic、Soluble、General finite 四级难度组织。

  2. Hugging Face Blog
    StateBench 发布:测试语言模型如何在长文档中跟踪状态变化

    Allen AI 在 Hugging Face 发布 StateBench,一个按四级难度评估语言模型长上下文状态跟踪能力的基准,并同步开放技术报告、数据和代码。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。