待验证50% 置信事实精确时间

Mid-training（持续预训练）是介于预训练和微调之间的训练阶段，数据量通常达到数千亿到数万亿token

1

来源数

50%

置信度

中期 (~90 天)

时效性

2026/7/2

首次发现

有效期至：2026/9/30

来源

Cursor Composer2 Training Revealed: A Complete Guide to Distributed Reinforcement Learning Engineering

bilibili豚工智能2026/6/6

相关事实

待验证当前主流大模型的训练数据量已达到十几T甚至六十T token69% 相似待验证预训练阶段在海量无标注语料上通过自监督学习完成，计算成本极高、周期通常以月计，而指令微调、RLHF对齐等工程阶段可在数周甚至数天内完成68% 相似待验证主流大模型的训练数据通常有6-18个月的滞后期68% 相似待验证在千亿参数大模型训练中，节点间通信开销可能占总训练时间的30%-50%67% 相似待验证训练过程可拆分为外循环（周/月单位，接收用户反馈）和内循环（小时/天单位，快速爬坡验证）67% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/51432

API

curl https://kongchang.com/api/v1/knowledge/claims/51432

MCP

get_claim(id=51432)