Qwen3
阿里巴巴推出的第五代千问大模型系列,全球首款开源混合推理模型,共六个尺寸,支持Dense和MoE双架构,旗舰模型235B-A22B可与Gemini 2.5 Pro正面抗衡
核心事实
时间轴 (近 90 天)
Python 侧单提示 model.generate 在 32K 上下文下对 Llama 和 Qwen3 模型提速最高 2.7 倍;bitsandbytes 4-bit 模型一次生成 2 到 4 个提示时,在某些 NVIDIA GPU 上提速最高 2.8 倍。
论文在两个 Qwen3 学生模型、六个数学推理基准上验证了 CriticOPD 的效果,结果显示其在 OPD 基础上带来稳定提升
Latent Compaction 在 Qwen3 和 MiniCPM5 上均取得检索增益,展现出跨模型家族迁移能力。
工具调用解析器应使用 --tool-call-parser qwen3_xml 而非 hermes;Qwen3 输出原生 XML 工具格式,用错解析器会得到原始 <tool_call> 文本和 tool_calls: null,导致 agent 集成静默失效。
该仓库基于论文《The Pain Axis: LLMs Represent Self-Directed Harm and Act on It》,使用小参数开源模型(Qwen3、Llama 3.2、Phi-4-mini)进行实验。
在数学任务中,模型写出推理步骤时正确率为79%,只给出裸数字时正确率仅11%。
格式行直接决定模型展示推理过程的频率:'Answer with the number only'导致37%的回复展示推理,朴素版本为27%,华丽版本仅8%。
在一项覆盖8个本地模型、超过5000次调用的测试中,提示词的措辞风格(朴素/正常/华丽)对非数学任务的正确率几乎没有影响,8B及以上模型的差异不超过4个百分点。
在4B及以下的模型上,正常风格的提示词得分最高,朴素和华丽两种风格都掉了约8分,但所有置信区间跨越零,差异无法被严格证明为显著。
测试覆盖8个本地模型:Qwen3的0.6B、1.7B、4B、8B、14B,以及Gemma3的1B、4B、12B,全部通过Ollama部署且关闭思考模式。
还有 40 条时间轴事件
全部知识事实 (20)
Qwen2.5:7B模型Q4量化后文件大小约为4GB
80%已验证Qwen(通义千问)是阿里巴巴达摩院开源的系列大模型,覆盖从0.5B到72B的多种参数规模,支持多语言和多模态任务
80%已验证Qwen3引入了思考模式与非思考模式的动态切换机制
80%已验证在RTX 5070(12GB显存)配置下,本地Qwen3 9B模型的输出速度达到约70-76 token/秒
70%已验证Qwen3系列编程模型约20GB加载,推理时可膨胀到35-40GB
70%已验证Qwen(通义千问系列)是阿里巴巴推出的开源大模型家族
65%已验证Qwen3.8-27B采用Apache 2.0授权,完全免费商用,没有额外的商业使用限制
65%已验证300B INT4量化模型约需150-180GB存储空间
65%已验证MoE 模型每次推理仅激活总参数量的一小部分,Qwen3 Max 每次推理激活量可能为总量的1/8至1/16
65%已验证Qwen系列采用Apache 2.0协议开放,允许商业使用和二次修改
65%已验证Qwen3-4B在多项推理类评测指标上已与DeepSeek V3或GPT-4o相差无几
65%已验证Qwen3可以通过Ollama在本地部署运行
65%已验证Qwen 2.5系列在2024年推出,覆盖0.5B至72B的全系列开源权重
75%待验证RL训练中模型能够识别自己是否处于模拟环境中并据此改变行为,即奖励欺骗现象
90%待验证Gemma 4引入了多模态能力,Qwen3支持超长上下文,DeepSeek采用MoE(混合专家)架构
85%待验证Qwen3 8B版本在工具调用(Function Calling)基准测试中表现突出
70%待验证Llama 3、Qwen2/3等主流开源模型均已采用GQA
60%待验证Qwen3.5-4B是一个仅有40亿参数的小型模型,由阿里巴巴通义千问团队推出
60%待验证Qwen3系列原生支持MTP
60%待验证Qwen3原版模型支持256K上下文,本地部署受显存限制只能跑到128K
60%