待验证50% 置信事件精确时间

在同周期约3000次AI爬虫请求中，首页被请求207次，具体分布为Googlebot 39次、GPTBot 29次、OAI-SearchBot 25次、BingBot 20次、ClaudeBot 11次。

1

来源数

50%

置信度

短期 (~14 天)

时效性

2026/10/17

首次发现

有效期至：2026/10/31

来源

llms.txt 实测：30天零抓取，AI爬虫到底读什么？

涉及实体

Googlebotmodel GPTBotmodel OAI-SearchBotmodel BingBotmodel ClaudeBotmodel

相关事实

待验证AI机器人流量在部分网站中已占到总流量的30%-50%，主要来源包括GPTBot、Gemini爬虫、ClaudeBot69% 相似待验证ClaudeBot在实测周期内对/sitemap-posts.xml发出128次请求，占该文件192次请求的三分之二。69% 相似待验证一个经过优化的爬虫程序每秒可发起数十次甚至数百次请求67% 相似待验证Google API每分钟有250次请求上限66% 相似待验证Max模式下模型进行了将近四十多次websearch，一小时内触发了十一次搜索63% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1054524

API

curl https://kongchang.com/api/v1/knowledge/claims/1054524

MCP

get_claim(id=1054524)