跳到正文
Hacker News· timschumi·· 3 小时前AI 评分38

基准测试危机:AI 代码生成加剧 ClickBench 过拟合

The Benchmarking Crisis

AI 导读

ClickBench 基准正因 AI 代码生成而失效:pgrust 实现仅按哈希值对字符串列做 group-by 聚合、缓存重复谓词,并在 Q17 利用数据聚簇和 limit 无 order by 跳过大部分数据读取,从而大幅提速但可能产生错误结果。

来源:Hacker News · databasearchitects.blogspot.com