待验证85% 置信事实时间未知

LLaMA系列最大的版本达到70B（700亿参数）

1

来源数

85%

置信度

长期有效

时效性

2026/6/1

首次发现

来源

什么是大模型？一文讲透参数、模型与AI大模型的本质

bilibili吴恩达机器学习

涉及实体

相关事实

待验证LLaMA-2 70B 总参数约 700 亿均匀分布于 80 层，每层约 8.75 亿参数，FP16 精度下单层约占 1.75GB 显存72% 相似部分验证以 65B 参数的 LLaMA 模型为例，传统全量微调需要 780GB 以上显存，而 QLoRA 仅需约 48GB63% 相似待验证运行700亿参数级别开源模型在 FP16 精度下至少需要约 140GB 显存，即 8 张 H100 并行62% 相似待验证LLaMA-70B的权重文件可达140GB，单次下载会消耗巨大带宽61% 相似待验证LLaMA 后续版本将词表从 3.2 万扩展至 12.8 万61% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/22427

API

curl https://kongchang.com/api/v1/knowledge/claims/22427

MCP

get_claim(id=22427)