待验证50% 置信事实精确时间
量化主流格式包括GPTQ、AWQ、GGUF等，INT4量化相比FP16通常导致模型在复杂推理、数学和代码任务上出现明显退化
1
来源数
50%
置信度
长期有效
时效性
2026/7/16
首次发现
来源
相关事实
待验证GGUF、GPTQ、AWQ是三种主流本地量化方案，较低比特版本（如Q4_K_M相比Q8_0）更容易触发Doom Loop70% 相似待验证当前主流的4-bit量化方案（如GPTQ、AWQ）普遍采用group size=128的分组量化策略66% 相似待验证GQE采用列式查询执行模型，底层依赖libcudf提供的列式数据处理原语65% 相似待验证GGUF格式中的Q4_K_M采用分组量化（Group Quantization）策略，每组独立计算缩放因子和零点64% 相似待验证倒排乘积量化（IVFPQ）在PQ基础上引入倒排索引结构，通过聚类将向量库分区，将检索复杂度从线性降低至亚线性63% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/526384API
curl https://kongchang.com/api/v1/knowledge/claims/526384MCP
get_claim(id=526384)