n-gram 提示将 NanoGPT 纪录降至 6.7 秒

作者 simonpure 称，用检索增强的 n-gram 提示把 NanoGPT Speedrun 世界纪录从 39.9 秒缩短到 6.7 秒，提速 83.2%，超过 2025 年以来所有改进的总和。 其做法是提示只从训练数据构建，不使用验证 token。作者同时指出，现行规则允许在计时区间内对验证数据做反向传播；若统计验证 n-gram 也适用同一规则，GPU 可在约 1 秒多内构建更大的提示语料，再用约 2 秒训练，合计约 3.1 秒。这一更短成绩是作者基于规则解释提出的假设，尚未作为已验证结果给出。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。