[
KongchangAI
]
Feed
Entities
Podcasts
Deep Dives
Developers
About
Get CLI
中文
Model
EmsyAI V4
EmsyAI
一个由个人开发者从零手写实现的1.967亿参数语言模型,采用GQA、SwiGLU、RoPE等现代架构技术,在消费级GPU上完成训练,用于探索工业级大模型训练的工程实践
Source Articles
从零训练2亿参数大模型:踩坑实录与工程经验
Sep 12