待验证50% 置信事实精确时间
AI模型调用的计费单位通常是Token，即文本被分词器切割后的最小语义单元
1
来源数
50%
置信度
长期有效
时效性
2026/8/15
首次发现
来源
相关事实
待验证大模型处理文本以Token（词元）为最小处理单元，由分词器完成切分80% 相似已验证In large language models, a Token is the smallest unit of text that a model processes75% 相似待验证Token是大模型计费的基本单位，本质上是文本被分割后的最小语义片段75% 相似待验证在基于 LLM 的 AI 编程助手中，Token 是计算成本的基本单位，输入和输出文本都会被切分为 Token 计费75% 相似待验证Token是模型处理文本的最小计量单位，OpenAI使用BPE算法将高频字符组合编码为单一Token，约75个英文单词≈100个Token68% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/754105API
curl https://kongchang.com/api/v1/knowledge/claims/754105MCP
get_claim(id=754105)