相比vLLM、TGI等偏向数据中心GPU的推理框架，llama.cpp在边缘设备、CPU实例和混合硬件环境中的适配性更强。