Fish Audio Drama 3开源引发热议:35B语音模型的卖点与许可争议

Fish Audio 发布 35B 语音模型 Drama 3,权重开放但许可并非开源,本地运行门槛在显存与许可而非技术。
Fish Audio 于 2026 年 10 月发布 35B 参数的 MoE 语音模型 Drama 3,权重公开,发音鲁棒性基准排名第一。它支持导演式自然语言控制、词级 inpainting、多角色同场和语言标签切换,受到 Reddit 与 X 上不少好评。但争议同样存在:其许可是社区许可而非开源,年收入超过 50 万美元的商业使用需单独协商;本地运行约需 39GB 显存;API 价格将在 11 月 12 日后涨至五倍。文章认为,Drama 3 的真正分界线在许可而非模型能力,对长音频剧、有声书等场景有意义,对普通短视频创作者意义有限。
Fish Audio 在 2026 年 10 月发布了 Drama 3,一个 350 亿参数的语音生成模型,权重直接放上了 Hugging Face。r/TextToSpeech 上有人用两块二手 RTX 3090 把它跑了起来,全程看着安装日志写出自定义 GPU 内核,自己承认完全看不懂那些代码。
他最后那句评论大概概括了整件事的情绪:「在 Eleven Labs 被封三次之后,终于有开放权重的东西了,我太高兴了。」
据 X 平台和 Reddit 上多个独立帖子的讨论,这次发布引发的关注主要集中在两点:一是它真的把权重放了出来,二是它的许可条款并没有看上去那么「开放」。这两点共同构成了 Drama 3 目前最核心的争议。

Drama 3 实际交付了什么
Fish Audio 把 Drama 3 定义为混合专家(MoE)模型,总参数量 35B,但每个 token 只激活约 3B 参数,所以实际推理负担没有数字听起来那么夸张。
性能上,它在 Artificial Analysis 的发音鲁棒性基准上拿到 93.2% 的第一名,上一代 S2.1 Pro 是 88.1%。在文件路径、邮箱地址这类精确序列上,从 79.4% 提升到 86.3%。据 Reddit 和 X 上多位用户的交叉反馈,这些数字与他们的实际体验基本吻合,没有出现明显的「跑分高、体验差」的割裂。
导演式控制:写指令像给演员说戏
Drama 3 在控制方式上做了一个明确的方向选择:不再依赖 [whispers] 这类猜测性的标签。你可以直接写意图,像给演员讲戏一样。
官方文档里的例子是:
[barely holding it together, forcing a smile] I'm fine. Really. Go on without me.
你可以在任意位置插入 [shaky breath] 或 [small laugh]。更特别的是,导演指令可以用与台词完全不同的语言书写。据官方文档说明,这意味着你可以用中文写指令,让模型用英文表演。
对于长期做语音生成的人来说,这解决的是一个非常具体的痛点:想要「悲伤但不要哭出来」的效果,过去只能反复重试,现在可以用自然语言描述意图,比如「疲惫但假装没事」或「在读一条她已经决定忽略的消息」。
词级修复与多角色同场
词级 inpainting 是这次讨论中被提及最多、也最让人觉得意外的功能。一段五分钟的有声书里某个词念错了,旧做法是整段重生成,情绪和节奏很难复现。Drama 3 的做法是只替换那一个词,模型会读取前后音频,把修补无缝嵌入,不破坏整体语气。
多角色场景同样在一个请求内完成。每个角色分配一个 voice ID,按轮次标注,就能生成一整段对话。官方文档里的示例是一段反应堆故障场景:工程师说情况「not great」,船长回「Define not great」,而工程师在说 blow 这个词时声音正好破裂。这些都在一个 prompt 里完成。
语言切换方面,用 <french> 或 <japanese> 标签包裹短语,只有被包裹的部分会切换语言。Fish Audio 标注这个功能为实验性,并提醒效果因 voice 和语言而异。
混合专家(MoE,Mixture of Experts)架构的核心思路是:模型虽然总量很大,但每次处理一个 token 时只激活其中一小部分「专家」子网络,其余部分保持休眠。因此「总参数量」和「实际计算量」是两个不同的概念。Drama 3 标注 35B 总量、约 3B 激活,意味着它的显存占用接近 35B 模型,但单次推理的算力消耗更接近 3B 模型。这也是为什么两块消费级显卡能把它跑起来,却仍需要约 39GB 显存——权重本身并不会因为「没被激活」而消失。
Artificial Analysis 是一个独立第三方评测机构,主要对语音、语言等生成模型做横向基准测试。文中提到的「发音鲁棒性」通常指模型在遇到生僻词、专有名词、数字、邮箱、文件路径等容易读错的序列时的准确率,这类测试和「情感表达是否自然」属于完全不同的维度,因此不能相互替代。
inpainting(修补)这一术语来自图像生成领域,指在已有画面中只重绘局部区域,同时让新内容与原图边缘、光影、风格保持一致。迁移到音频后,任务变成:给定一段已经生成或录好的语音,只重新生成其中的一小段(如一个词),同时保持前后的音色、语速、基频和情绪不跳变。这比整段重生成更难,因为模型必须从上下文音频中推断出「这里原本应该是什么语气」,而不是从头决定。
voice ID 是语音克隆或语音合成中用于标识某一特定说话人音色的编号。在多角色对话场景里,为每个角色绑定不同的 voice ID,并在文本中按轮次标注,模型就能在同一段音频中切换音色。这种做法避免了为每个角色单独生成再手动拼接,但前提是模型必须能稳定区分「轮到谁说话」,标注格式因此比普通 TTS 更严格。
热度背后被忽略的细节
许可不是开源
X 上有人说它「actually insane」,也有人直接说「standard voiceovers 要完了」。Uncle Roger 的 demo 传播很广,因为模型把他的无奈叹气还原得相当准。
但热度帖子里很少提到的是:Drama 3 的许可不是开源协议,而是 Fish Audio Community License v1.0。研究和非商业用途免费;年收入低于 50 万美元的商业用途也免费;超过这个门槛,或者想把模型包装成自己的 API 转售,需要单独谈。
Reddit 上有人直接写了「Lame license」,也有人表示理解公司需要赚钱。两种态度都有,但「开放权重」和「开源」在严格意义上并不是一回事。
| 项目 | 实际情况 |
|---|---|
| API 价格 | 每百万字符 10 美元,11 月 12 日后涨至 50 美元 |
| 交互式编辑 | 邀请制,尚未上线 |
| 本地运行 | 双 3090 约需 39GB 显存 |
语言覆盖的承诺与未验证部分
有用户在同一个帖子里问 Drama 3 的德语表现,没有人回复。官方宣称支持 83 种语言,但被引用的基准测试只测发音鲁棒性,不测「哭起来是否真实」。这两个测试维度完全不同。
r/TextToSpeech 上还有一条很直接的负面评价:「its actual shit LOL barely better than breeze with nearly 10x the size.」这条评论未必准确,但它确实存在,而且目前没有看到系统性的反驳数据。
「开放权重」(open weights)指的是模型参数文件可以公开下载、本地运行和自行微调;「开源」(open source)通常还要求许可协议符合 OSI 定义,允许任意用途、修改和再分发。Drama 3 公开了权重,但许可限制了高收入商业使用和 API 转售,因此属于「权重开放但非开源」这一类。近年来很多模型采用这种折中路线:用开放权重换取社区关注和生态扩散,同时保留商业授权收入。
年收入 50 万美元这条门槛值得注意,因为它按公司整体营收而非「使用该模型产生的收入」计算。这意味着即便一个年营收 80 万美元的公司只把 Drama 3 用在内部小工具上,也可能需要单独谈授权。对个人创作者和早期小团队来说影响很小,但对已有稳定营收的公司,合规判断会比较复杂。
命名逻辑让人费解
一个容易被忽略但反复被提及的问题是命名。Fish Audio 的产品线是 S2、S2.1 Pro,然后跳到 Drama 3。从代际上看,Drama 3 实际上是另一条产品线的第三代,但数字编号容易让人以为它只是某个已有系列的延续。这种命名方式在语音模型发布里并不罕见,但对使用者来说,判断哪个模型更新需要额外花时间。
它适合谁,不适合谁
大多数做短视频、每月产出两条内容、对机器人语音没有更高要求的人,不需要 Drama 3。安装过程本身就不轻松,Reddit 上有三个人在同一条帖子里讨论自己的显卡能否装得下。
39GB 显存不是一个可以忽略的数字。单张 48GB 显卡是最干净的路径,而大多数人没有这样的硬件。GitHub 上安装日志会写出自定义内核,说明这个项目仍处于早期阶段。
还有一个细节值得注意:如果 API 调用时 model header 设置错误,请求不会失败,而是静默回退到旧的 S2.1 Pro。你可能以为自己测的是 Drama 3,实际听到的是上一代模型。
推广折扣在 11 月 12 日结束,之后 API 价格变为五倍。如果预算按每百万字符 10 美元做长期规划,需要重新计算。
真正的分界线在许可,不在模型
从目前的讨论来看,Drama 3 对做长音频剧、游戏配音、有声书制作的人有实际意义,对只是想要一个声音来读周三 TikTok 文案的人意义有限。
真正的门槛不在技术,而在许可。个人创作者几乎不受影响。想把 Drama 3 作为服务转售的公司,会发现开放权重更像是一个入口,真正的商业产品需要另签合同。
那个用两块二手 3090 跑起 35B 语音模型的人,之所以这么做,只是因为他被闭源平台封了。这件事本身比任何基准分数都更能说明 Drama 3 出现意味着什么:门的位置变了。
相关推荐

房产经纪人用AI提效的5个实操方法(2026版)
房产经纪人如何用AI提效?结合YouTube实操演示,拆解ChatGPT写房源描述、Canva做营销物料、表单管理开放日线索、Zapier自动跟进、卖家面谈准备5个方法,并提示公平住房法规、照片真实性与定价核实等风险边界。

Grok Bot vs ChatGPT Agent:两大AI代理谁更强?
Grok Bot 与 ChatGPT Agent 有何区别?本文对比两者的工作方式:Grok Bot 拥有云端计算机、可常驻工具内自动执行多步任务;ChatGPT Agent 在浏览器中操作网页,通用任务更成熟。附选型建议。

Walmart Agent Gateway:AI帮你自动购物,亚马逊为何反其道而行?
沃尔玛推出Agent Gateway,允许ChatGPT、Gemini等AI助手直接接入商品库替用户搜索比价加购,并设消费限额与逐笔审批三道安全阀。亚马逊则封堵外部AI代理,两大零售巨头走向相反路线。功能目前仅限美国,印度市场或随后跟进。