janreges 发布 Rust 网站爬虫 SiteOne Crawler

janreges 发布 SiteOne Crawler：一款用 Rust 编写的无依赖单二进制网站爬虫，可深度抓取站点，并生成 0–10 分的 HTML 审计报告，覆盖性能、SEO、安全、可访问性与最佳实践。 该工具提供可选 AI 分析，可接入 OpenAI、Anthropic、Google Gemini 等商业模型，也可接入 vLLM、Ollama、LM Studio 等本地或兼容端点；据发布说明，本地部署可让数据不离开本机。AI 功能为选择性开启，增加 AI 评分 SEO、安全/可访问性/性能/基础设施摘要、拼写语法检查、llms.txt 及自定义提示，并称设有成本控制与 --ai-dry-run 预览。 另有可选 --browser 模式，通过 Chromium（CDP）渲染页面，使 React、Vue、Svelte、Angular、Next.js 站点按渲染后 DOM 被抓取、导出和转换。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。