Mojo Dojo 发布 AI 爬虫发现新页面耗时统计

Mojo Dojo 上线 AI Discovery Index，追踪新发布网页被搜索引擎和 AI 爬虫首次访问所需的时间。该站称，新页面被任意爬虫首次抓取的中位时间为 14 小时，Bingbot 在 51% 的页面上最先到达；首个 AI 爬虫的中位时间同样为 14 小时，ClaudeBot 在 49% 的页面上最先到达，77% 的新页面在 24 小时内被 AI 爬虫访问。 统计自 2026 年 6 月 6 日开始追踪以来共纳入 314 个页面，其中 206 个因 URL 在发布前已上线而被排除；2026 年 10 月 12 日之后的访问带有精确时间戳，该视图中 78% 的页面至少有一条。数据以 CC BY 4.0 协议免费复用，需注明来源。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。