已验证80% 置信事实精确时间
GPT-4使用的cl100k_base词表包含约10万个Token单元,可通过tiktoken库精确计算文本的Token数量
8
来源数
80%
置信度
长期有效
时效性
2026/7/8
首次发现
来源
Otari:开源LLM控制平面工具全面解析
hackernewshackernews2026/7/6
相关事实
已验证GPT-4 使用约 10 万 Token 的词表84% 相似待验证GPT-4所使用的cl100k_base词表包含约10万个Token单元,对中文单字的覆盖率相对较低81% 相似已验证GPT-4系列采用cl100k_base词表(约10万词元),GPT-4o系列升级至o200k_base(约20万词元)79% 相似已验证OpenAI从GPT-2开始使用BPE的变体,GPT-4的cl100k_base词汇表包含约10万个token78% 相似待验证OpenAI's GPT series uses the tiktoken library, with vocabulary sizes typically ranging between 50,000 and 100,000 Tokens77% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/217854API
curl https://kongchang.com/api/v1/knowledge/claims/217854MCP
get_claim(id=217854)