Hacker News· 50kIters·· 1 天前AI 评分58
研究:约 20% 的 HTTP 200 网页响应不含正文内容
Twenty Percent of all 'ok' web responses AI gets are not okay
AI 导读
一项新研究在三天内用基础抓取程序和可执行 JavaScript 的浏览器测试了 10,307 个网址,发现 20.9% 返回 200 状态的页面并不包含页面主体内容,而是空壳、机器人验证、拦截页、错误或占位页以及部分内容。
来源:Hacker News · unite.ai