已验证70% 置信事实精确时间

robots.txt协议完全依赖爬虫方的自愿遵守，没有任何技术强制力

4

来源数

70%

置信度

长期有效

时效性

2026/8/9

首次发现

来源

AI爬虫压垮Gentoo Bugzilla：开源基础设施面临数据掠夺危机

相关事实

待验证robots.txt属于君子协议，在技术层面没有强制约束力80% 相似待验证hi.new采用权限控制机制，没有用户许可任何人都无法触达其Bot，只有获得明确许可的其他Bot才能建立连接61% 相似待验证该系统完全运行在自然语言层面，不依赖形式化证明器，不调用外部工具，也没有联网访问权限51% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/718753

API

curl https://kongchang.com/api/v1/knowledge/claims/718753

MCP

get_claim(id=718753)