待验证50% 置信事实精确时间
Google-Extended和Applebot-Extended不是爬虫，而是robots.txt中的控制令牌，用来决定Googlebot和Applebot抓取的内容能否用于Gemini或Apple模型训练，不会出现在服务器日志里
1
来源数
50%
置信度
长期有效
时效性
2026/10/14
首次发现
来源
涉及实体
相关事实
待验证Google-Extended 是 Google 在 2023 年 9 月引入的 robots.txt 产品令牌，用于控制 Google 的 Gemini 模型训练和 grounding，与 Googlebot 是两个完全独立的令牌。73% 相似待验证Google-Extended 控制的是 Google 能否将内容用于 Gemini 模型训练与 grounding，它并不影响 Google Search 或 AI Overviews，后者使用的是常规 Googlebot。71% 相似待验证Google的AI爬虫标识为"Google-Extended"69% 相似待验证谷歌推出了 googlebot 系列指令扩展，部分平台支持 robots meta 标签中的 noindex、nosnippet 等值68% 相似待验证Googlebot 和 Google-Extended 各自服务于不同系统，抓取行为与排名、AI功能展示是分离的。68% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1028525API
curl https://kongchang.com/api/v1/knowledge/claims/1028525MCP
get_claim(id=1028525)