Unverified50% confidenceFactExact time
SentencePiece由Google开发，无需预分词步骤，直接在原始文本上学习子词单元
1
Sources
50%
Confidence
Long-term
Relevance
7/22/2026
First Seen
Sources
Related Claims
UnverifiedSentencePiece由Google于2018年推出，支持无监督训练，无需预先进行空格分词，Google的T5、LLaMA等模型均采用其Unigram语言模型算法81% similarUnverifiedGoogle的Gemini采用SentencePiece框架配合Unigram语言模型算法进行分词67% similarUnverified谷歌词典框属于知识面板和精选摘要体系的一部分，由谷歌自2012年起构建的知识图谱驱动65% similarUnverified谷歌翻译早期的重大突破很大程度上依赖海量平行语料库（双语成对文本）64% similarUnverifiedGoogle的Gemma系列分词器采用SentencePiece框架实现，支持BPE和Unigram两种算法62% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/593877API
curl https://kongchang.com/api/v1/knowledge/claims/593877MCP
get_claim(id=593877)