待验证50% 置信事实精确时间

Davinci 参数约为 1750 亿，Curie、Babbage、Ada 依次削减参数规模，分别对应分类、语义搜索、文本嵌入等场景

1

来源数

50%

置信度

长期有效

时效性

2026/9/28

首次发现

来源

GPT-3 正式退役：一个语言模型时代的谢幕

涉及实体

Davincimodel Curiemodel Babbagemodel Adamodel

相关事实

待验证模型在第1层和第14层放置n-gram查找表，24个哈希各索引约1600万行，总计1960亿参数，超过模型权重的三分之一63% 相似待验证MoE架构中，一个标称800亿参数的模型每次推理时可能只激活约200亿参数，VRAM占用大幅降低61% 相似待验证对于1.6万亿总参数、490亿激活参数配置，实际推理时只有约3%的参数参与计算60% 相似待验证DistilBERT将参数量压缩至6600万（原版1.1亿），推理速度提升60%，精度损失不足3%57% 相似待验证通义千问3.8约有两万亿参数，Kimi约有两万亿参数57% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/955833

API

curl https://kongchang.com/api/v1/knowledge/claims/955833

MCP

get_claim(id=955833)