Unverified50% confidenceFactExact time
Google的Gemma系列分词器采用SentencePiece框架实现，支持BPE和Unigram两种算法
1
Sources
50%
Confidence
Long-term
Relevance
8/11/2026
First Seen
Sources
Related Claims
UnverifiedGoogle的Gemini采用SentencePiece框架配合Unigram语言模型算法进行分词78% similarUnverifiedGoogle推出了Gemma 2B小语言模型75% similarUnverified谷歌词典框属于知识面板和精选摘要体系的一部分，由谷歌自2012年起构建的知识图谱驱动70% similarUnverifiedOpenAI 使用的 tiktoken 以及 Google 的 SentencePiece 均以 BPE 为基础70% similarUnverifiedMicrosoft的Phi系列和Google的Gemma系列是小语言模型的代表性工作69% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/729925API
curl https://kongchang.com/api/v1/knowledge/claims/729925MCP
get_claim(id=729925)