[控场AI]
· 4 分钟阅读· 2,120 字

DeepSeek V4.1-Flash发布:代理成本骤降,性能宣称待验证

DeepSeek V4.1-Flash发布:代理成本骤降,性能宣称待验证

DeepSeek开源新模型宣称性能全面提升且成本减半,但分数均为自报待验证。

DeepSeek于10月17日发布V4.1-Flash-1017,是9月10日V4.1-Flash的更新版,权重以MIT许可证开源在Hugging Face,API价格不变。官方称其为“帕累托改进”:全部11项基准均有提升,DeepSWE编码基准达77.0%,每任务成本略低于0.20美元,较前代约0.50美元降幅过半,并称在多数测试中击败Kimi K3与GPT-5.6 Sol,但落后Claude Opus 5。文章区分了可验证与不可验证部分:定价与开源权重公开可查,成本优势方向也获Artificial Analysis第三方数据佐证;但所有基准分数均出自DeepSeek自建框架,尚无独立复现。文章将其标注为“关注中”而非背书,认为价格性能的演进轨迹比单次分数更值得关注。

DeepSeek于10月17日发布了DeepSeek-V4.1-Flash-1017,这是对9月10日推出的V4.1-Flash模型的更新。模型权重以MIT许可证开源在Hugging Face上,现已通过DeepSeek官网、App和API上线,API价格保持不变。官方宣称新模型在全部11项基准测试中均有提升,其中Terminal-Bench 4.0提升11.1分,ProgramBench提升8.8分,DeepSWE编码基准达到77.0%,而平均每任务成本仅略低于0.20美元。但所有分数均来自DeepSeek自建的测试框架,尚未被独立复现。

DeepSeek V4.1-Flash-1017发布信息

官方宣称:更准、更快、更便宜

DeepSeek广告将此次更新称为“帕累托改进”——分数更高、输出更短、任务完成更快。其对比表格显示,新模型在11项测试中有10项击败Kimi K3,9项击败GPT-5.6 Sol,但在7项上落后于Claude Opus 5。最引人注目的是成本数据:在DeepSWE编码基准上,新模型以平均每任务略低于0.20美元的成本达到77.0%的准确率(最高设置),低设置下约72%准确率对应约0.10美元。作为对比,前代模型以约0.50美元每任务达到74.2%,意味着新模型在准确率提升3个百分点的同时,成本降低了一半以上。

据DeepSeek图表,竞品模型在相同DeepSWE基准上的每任务成本在2美元到10美元以上。这一价格差距构成了此次发布的核心叙事:用开源模型以极低成本获得接近前沿闭源模型的编码代理能力。

帕累托改进是经济学与多目标优化中的概念,指在不使任何一方境况变差的前提下,至少让一方变得更好。用在模型更新上,DeepSeek的意思是:准确率、输出长度、任务耗时、成本这几项指标没有任何一项退步,且至少一项明显改善。与之相对的是“权衡式更新”——比如分数涨了但成本也涨。判断是否真为帕累托改进,需要看全部指标是否同时不劣化;文章后文指出这些数据均为自报,因此这一说法本身也待独立验证。

可验证的部分:定价与开源权重

定价信息是公开可查的。DeepSeek的API文档列出每百万输入token 0.15美元(非高峰,高峰0.30美元),每百万输出token 0.60美元(非高峰)。按此费率推算,每任务成本的计算与公布价格一致。模型权重确实以MIT许可证发布在Hugging Face上,任何人都可以下载运行——这也意味着独立验证在技术上完全可行。

成本优势的方向也有第三方数据佐证。Artificial Analysis此前测量V4-Flash系列时发现,其每任务成本远低于竞品(在其测试框架中为3美分,而GPT-5.6 Sol为1.86美元),说明“便宜”这个标签并非此次新发布才出现。

MIT许可证 是最宽松的开源许可之一,允许使用者自由使用、修改、再分发甚至商用,只需保留版权与许可声明,且不提供担保。对模型权重而言,这意味着企业可以私有部署、微调并闭源分发衍生模型,限制远少于Llama系列的自定义许可或部分“仅研究用途”的开放权重。因此“MIT开源”不仅是可验证的事实,也直接影响采用门槛:任何人都能在本地复现基准、审计行为或构建商业产品。文章强调“独立验证在技术上完全可行”,正是基于这一点。

无法验证的部分:所有基准分数均为自报

每一項基准分数都来自DeepSeek自选的测试框架,截至发稿时无一被独立复现。这是典型的厂商记分卡问题:最有利于故事的分数,恰恰来自讲故事的一方。原文对此态度明确——标注为“关注中”而非背书,并给出了确认条件(独立基准复现)和证伪条件(第三方评测结果远低于DeepSeek数字)。

即便分数最终被证明有10%到20%的水分,真正值得关注的信号是价格性能的演进轨迹。编写和测试代码的AI代理正在以每几个月为单位急剧变便宜,而开源权重意味着任何人都能验证或推翻这些宣称。这正是需要持续观察的部分。

简单来说: 一家中国AI公司发布了一款可免费下载的编码助手,声称其表现优于每任务成本高出10到50倍的模型。价格部分经得起核查,性能部分目前仍是厂商一面之词。保持关注,但尚未被说服。

Terminal-Bench 是评估AI代理在真实终端环境中执行命令行任务能力的基准,任务包括文件操作、脚本编写、系统配置等,强调端到端的自主完成而非单轮问答。DeepSWE 则聚焦软件工程场景,通常要求模型在真实代码库中定位问题并提交补丁,评分依据测试是否通过。ProgramBench 类似,侧重程序合成与调试。这类“代理型”基准与传统的代码补全基准不同:它们以任务为单位计分,并可以统计每任务的实际token消耗与耗时,因此能同时反映能力与成本。这也是文章能以“每任务0.20美元”对比竞品的原因。不过,代理型基准对测试环境、工具调用次数、重试策略高度敏感,不同厂商自建框架下的分数可比性有限。

#DeepSeek V4.1-Flash#AI代理成本#开源编码模型#DeepSWE基准#API定价#基准测试验证
分享:

相关推荐