待验证50% 置信事实精确时间
OpenAI 使用的 tiktoken 以及 Google 的 SentencePiece 均以 BPE 为基础
1
来源数
50%
置信度
长期有效
时效性
2026/7/20
首次发现
来源
相关事实
待验证Google的Gemma系列分词器采用SentencePiece框架实现，支持BPE和Unigram两种算法70% 相似待验证Page Agent的技术路径与OpenAI的Computer Use、Google的Project Mariner、Anthropic的Claude Computer Use高度相似61% 相似待验证Google的Gemini采用SentencePiece框架配合Unigram语言模型算法进行分词60% 相似待验证OpenAI、谷歌等头部机构均在积极研究文本水印标准60% 相似待验证SentencePiece由Google开发，无需预分词步骤，直接在原始文本上学习子词单元60% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/570184API
curl https://kongchang.com/api/v1/knowledge/claims/570184MCP
get_claim(id=570184)