[控场AI]
概念Pipeline Parallelism / 流水线并行

Pipeline并行

一种分布式模型推理/训练并行策略,将模型按层切分到不同设备上,各设备负责不同层的计算

来源文章