Unverified50% confidenceFactExact time
OpenAI的GPT系列使用tiktoken分词器，Anthropic的Claude使用自研分词器
1
Sources
50%
Confidence
Medium-term (~90 days)
Relevance
7/2/2026
First Seen
Valid until: 9/30/2026
Sources
Cursor按量计费方案解析：账号池调度如何降低使用成本
bilibiliyoyo自动化6/23/2026
Related Claims
UnverifiedClaude使用Anthropic定义的tool_use格式，GPT系列使用OpenAI的function_calling协议，大语言模型的工具调用没有统一的行业标准78% similarUnverifiedGPT系列（OpenAI）和Claude（Anthropic）是闭源模型74% similarPartially VerifiedOpenAI的tiktoken从GPT-2时代的5万词表扩展至GPT-4的10万词表73% similarUnverifiedGPT系列使用tiktoken分词器，LLaMA系列使用SentencePiece分词器72% similarUnverifiedGPT系列由OpenAI以英文互联网语料为主体训练，采用自回归架构72% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/41671API
curl https://kongchang.com/api/v1/knowledge/claims/41671MCP
get_claim(id=41671)