待验证50% 置信事实时间未知
Anthros UD Q5 GGUF quantization achieves approximately 18 tokens per second generation speed on Mac
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/7/2
首次发现
有效期至:2026/9/30
来源
Running Qwen3.6-27B Locally on Mac: 4 Solutions Benchmarked
bilibilikate人不错
相关事实
待验证MTP-LX with 4bit quantization achieves 40+ tokens per second generation speed on Mac, approximately double the speed of the MLX 6bit solution80% 相似待验证Anthros MLX 6bit with Diflash achieves approximately 22 tokens per second generation speed on Mac77% 相似待验证Anthros UD Q5 GGUF方案运行Qwen3.6-27B的生成速度约为18 tok/s74% 相似待验证Gemma量化模型在高性能笔记本电脑上Token生成速度可达每秒20-50个,纯CPU推理约5-15 tokens/秒,INT4量化下NVIDIA RTX 4060/4070可将推理速度提升3-5倍71% 相似待验证Qwen3-0.6B 经 INT4 量化后模型文件仅约 400MB,保留约 95% 基准能力,普通笔记本 CPU 即可实现每秒 10-30 token 生成速度69% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/55306API
curl https://kongchang.com/api/v1/knowledge/claims/55306MCP
get_claim(id=55306)