待验证50% 置信观点精确时间

'10T'在大模型语境下也可能指训练数据的token总量，而非参数量

1

来源数

50%

置信度

长期有效

时效性

2026/9/12

首次发现

来源

OpenAI疑完成超10万亿参数预训练模型"Bel"：规模化竞赛再升级

涉及实体

相关事实

待验证针对有限意图集合训练的轻量级专用模型参数量通常在10M以下，其推理延迟可比通用LLM调用低2-3个数量级74% 相似待验证微软的Phi系列小模型通过精心设计的合成'教科书级'数据进行训练，以不到3B的参数量在多项基准测试中超越了10倍于其规模的模型69% 相似待验证在合成预训练基础上用数百张真实数据微调，往往能将mAP提升10-20个百分点67% 相似待验证DiffusionGemma的监督微调步骤成本不到原模型训练总开销的10%66% 相似待验证研究表明在某些开源Benchmark上头部大模型训练语料与评测数据的n-gram重叠率可高达15%~30%66% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/913789

API

curl https://kongchang.com/api/v1/knowledge/claims/913789

MCP

get_claim(id=913789)