Unverified50% confidenceFactExact time
Quantprobe 是一个开源的内存分配优化框架与部署助手,专门为在资源受限的消费级硬件上运行超大规模本地 LLM 而设计
1
Sources
50%
Confidence
Long-term
Relevance
8/5/2026
First Seen
Sources
Related Claims
UnverifiedQuantprobe 会动态地在显存与内存约束之间平衡量化等级,将模型权重拆分到 CPU 和 GPU 之间以避免 OOM 错误68% similarUnverifiedQuantprobe 能够在下载模型权重之前根据用户硬件配置估算模型的生成速度(tokens/s)68% similarUnverifiedQuantaMind支持对Ollama、llama.cpp、MLX、vLLM、SGLang等运行时环境进行并排对比63% similarUnverifiedQEMU是开源的全系统模拟器,支持x86、ARM、MIPS等多种架构仿真,是嵌入式系统固件分析的常用平台63% similarUnverified主流本地部署框架包括Ollama、llama.cpp、LM Studio等,支持在消费级硬件上运行经量化压缩(如GGUF格式4-bit量化)的模型62% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/689089API
curl https://kongchang.com/api/v1/knowledge/claims/689089MCP
get_claim(id=689089)