模型Nemotron 3 Nano
Nemotron 3 Nano 30B-A3B
NVIDIA发布的MoE架构语言模型,总参数量约300亿(30B),但每次推理实际激活参数量仅约30亿(A3B),存储大小约24.57GB,兼顾大模型知识容量与小模型推理速度。
时间轴 (近 90 天)
10月12日
候选阵容涵盖从 0.70GB 的 LFM 1.2B 到 24.57GB 的 Nemotron 3 Nano 30B-A3B
待验证50%
10月12日
Nemotron 3 Nano 30B-A3B 中 30B 指总参数量约300亿,A3B 表示每次前向传播实际激活的参数量约30亿,模型权重仍需完整加载,运行时内存占用与稠密大模型相近
待验证50%