待验证50% 置信事实精确时间

字节对编码(BPE)算法最初由Sennrich等人于2016年引入NLP领域，OpenAI的tiktoken分词器基于此原理

1

来源数

50%

置信度

长期有效

时效性

2026/7/9

首次发现

来源

GPT-5.6三模型家族发布：Sol/Terra/Luna能力全解析及政府限制事件

bilibili零度解说2026/7/1

相关事实

已验证OpenAI使用BPE（Byte Pair Encoding，字节对编码）算法进行Token编码72% 相似待验证OpenAI系列模型采用BPE（字节对编码）算法进行分词，起源于数据压缩领域68% 相似待验证OpenAI使用tiktoken分词器进行Token计量67% 相似待验证OpenAI采用基于BPE算法的tiktoken库，GPT-4系列使用cl100k_base词表，包含约10万个token67% 相似待验证OpenAI 于 2024 年推出的 Structured Output 引入受限解码技术，在 token 生成阶段过滤词表以保证输出符合 schema63% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/320873

API

curl https://kongchang.com/api/v1/knowledge/claims/320873

MCP

get_claim(id=320873)