[控场AI]
待验证50% 置信事实精确时间

AI爬虫只下载HTML，不执行JavaScript，因此依赖浏览器端JavaScript的网站分析工具无法统计AI爬虫的访问。

1
来源数
50%
置信度
长期有效
时效性
2026/10/13
首次发现

来源

5种方法查看AI爬虫是否抓取你的网站（附命令）

涉及实体

AI爬虫conceptJavaScriptconcept

相关事实

待验证AI爬虫（如GPTBot、ClaudeBot、Common Crawl）采用轻量级HTTP请求+HTML解析方式，不为每个页面启动完整浏览器执行JavaScript76% 相似待验证爬虫程序通过代码向服务器发起HTTP请求，服务器返回原始内容，但爬虫没有浏览器的渲染能力，拿到的是网页的原始HTML源码67% 相似待验证如果页面内容需要JavaScript才能显示，在使用非JS爬虫抓取时无法获取该内容，这本身就是一个发现66% 相似待验证爬虫获取到的只是未经渲染的HTML源代码，因为爬虫没有浏览器的渲染能力66% 相似

引用此条事实

Stable URI
https://kongchang.com/claim/1015305
API
curl https://kongchang.com/api/v1/knowledge/claims/1015305
MCP
get_claim(id=1015305)