开源小型语言模型项目,参数规模约1.1B,基于Llama架构构建,专注于以极低资源实现高效语言建模,常用于边缘部署与研究教学
nanoGPT、TinyLlama等开源项目已经证明了小模型的教育与应用价值