跳到正文
热点事件持续更新

研究者提出OMEGA数学泛化基准

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

研究者 Yiyou Sun 等人提出 OMEGA 基准,从探索性、组合性、变革性三个维度评估大语言模型的分布外数学推理能力,题目覆盖几何、数论、代数、组合、逻辑与谜题。 测试显示,前沿模型随题目复杂度上升性能明显下降。对 Qwen 系列模型微调后,探索性泛化有显著提升,组合性泛化仍有限,变革性推理几乎无改善。

AI 根据报道生成 · 58 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. Hacker News
    OMEGA:LLM 能否在数学中跳出框架推理?

    研究者提出 OMEGA 基准,从探索性、组合性、变革性三个泛化维度评估 LLM 的分布外数学推理能力,题目覆盖几何、数论、代数、组合、逻辑与谜题。测试显示前沿模型随题目复杂度上升性能明显下降;对 Qwen 系列模型微调后,探索性泛化有显著提升,组合性泛化仍有限,变革性推理几乎无改善。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。