Hacker News· crovillas·· 3 小时前AI 评分50
Show HN：查看网页在 ChatGPT 和 Claude 爬虫眼中的样子
Show HN: See a web page the way ChatGPT and Claude's crawlers see it
AI 导读
一款免费免注册工具可模拟 ChatGPT、Claude、Perplexity 和 Google AI 的爬虫视角审计任意公开网页，按问题优先级列出 robots.txt、防火墙、noindex 等阻碍抓取的规则，以及无 JavaScript 时 HTML 中的文本、标题、结构化数据和日期。
来源：Hacker News · kliqo.ai