Fish Audio 发布 Drama 3 语音 AI 模型
TECH

Fish Audio 发布 Drama 3 语音 AI 模型

44+
Signals

战略概览

  • 01.
    Fish Audio 推出了 Drama 3,这是一款围绕用自然语言指导 AI 语音表现构建的文本转语音模型,而不仅仅是生成语音。
  • 02.
    该模型是一个拥有 350 亿参数的混合专家系统,每个 token 激活约 30 亿参数,基于 Qwen3.5-35B-A3B 架构,并配备新的 Codebook-MTP 音频解码器。
  • 03.
    一个关键功能是音频修复(audio inpainting),允许用户在保留周围语音、情绪和节奏的前提下,仅重新生成现有音频中的单个词或短语,避免为小修改重新录制整段内容。
  • 04.
    Drama 3 支持 83 种语言,单次生成最多可包含 16 个不同说话人标签,适用于多角色和长篇内容创作。
  • 05.
    Drama 3 预览版在 Artificial Analysis 的发音鲁棒性基准测试中得分 93.2%,在所有被追踪的模型(开源与闭源)中排名第一,领先于 ElevenLabs v4 和 v4 Turbo。
  • 06.
    模型权重在新的 Fish Audio Community License v1.0 下发布:研究和非商业用途免费,商业用途仅限年收入低于 50 万美元时免费。
  • 07.
    Drama 3 上线首日即在 ComfyUI、Runway、Pika Labs、OpenRouter、OpenArt、Creatify 和 Vercel 等多个合作平台同步推出。
  • 08.
    首发 API 定价为每百万字符 10 美元,持续至 2026 年 11 月 12 日,相比 50 美元的标价享受 80% 折扣。

开放权重,受限自由:Drama 3 许可证究竟允许什么

Fish Audio 将 Drama 3 宣传为开放权重模型,模型卡片也支持这一说法,并在 Hugging Face 上发布了权重 [1],采用新的 Fish Audio Community License v1.0。但该许可证并非无条件开放:研究和非商业用途免费,商业用途仅限年收入低于 50 万美元时免费——超过此门槛的用户,包括大型工作室或计划转售推理服务的平台,必须另行协商商业协议。独立基准测试机构 Artificial Analysis 在将 Drama 3 列为顶级开源语音模型的同时,也指出该安排属于“开放权重但无商业使用权”,而非完全开放源代码 [2]。该许可证还应对了技术本身更直接的风险:Fish Audio 的官方条款明确禁止未经说话人同意克隆其声音,这表明随着语音模型变得越来越可控和逼真,未经授权的声音复制风险也在同步上升 [3]。这一区别决定了谁真正受益:独立开发者、独立游戏工作室和小型音频剧制作人可以获得免费的先进语音引擎,而开放权重的标题对资金充足的平台几乎没有开放其技术,因为真正无限制的发布会对其利润空间造成压力。

无需重录整段,仅修改一个词

Drama 3 与此前 TTS 模型真正的区别不在于发音得分,而在于 Fish Audio 所称的“音频修复”(audio inpainting):能够在已生成的音频文件中重新合成单个词或短语,模型会聆听编辑前后两侧的音频,并使新词的语音、情绪和节奏与上下文保持一致 [3]。联合创始人兼首席科学家、前 Nvidia 研究员Shijia Liao将底层架构变革视为实现这种控制的关键:“Drama 3 采用了新架构,实现了更好的控制和指令遵循能力。当你更改一个词时,Drama 3 会聆听该词两侧的音频。” [4]从技术角度看,该功能建立在一个 350 亿参数的混合专家模型之上,每个 token 激活约 30 亿参数,基于 Qwen3.5-35B-A3B 架构,并配备新的 Codebook-MTP 音频解码器,因果式解码 10 个码本 [1]。对于有声书、配音和多角色游戏对白等生产流程而言,过去一个单词读错意味着整段重录并希望新版本能匹配旧风格,而现在这一功能彻底改变了工作流本身,而不仅仅是音质的渐进提升。

一项基准测试冠军,以及关于其意义的持续争论

在 Artificial Analysis 的发音鲁棒性排行榜上,Drama 3 预览版得分为 93.2%,领先于该公司追踪的所有模型(无论开源或闭源),包括 ElevenLabs 的 v4(91.7%)和 v4 Turbo(90.1%),远超 Fish Audio 自身此前的旗舰模型 S2.1 Pro(88.1%)[3]。这是一个经过第三方验证的重要成果。然而,开发者社区的反应却不尽一致:一些评论提出了如今常见的批评,即排行榜第一并不自动意味着语音在实际听感上的优越性,也有质疑指出在非主打语言中的表现可能不佳 [2]。但实际使用者的反馈更为积极:一位 AI 影人表示,语音长期是他生成视频作品中的薄弱环节,而 Drama 3 是首个能让自然语言指导(如句中情绪转变)真正实现的模型。这种分歧在 AI 模型发布中屡见不鲜:无论自动化排行榜指标测量得多严谨,它本身无法解决人类耳朵在 83 种语言和广泛现实场景下对语音听感的主观判断之争。

以小博大:用远低于对手的收入击败年营收 5 亿美元的巨头

Fish Audio 成立约一年,由前 Nvidia 研究员Shijia Liao创立,并于 2026 年 7 月 28 日完成 5200 万美元种子轮融资,由 Coreline Ventures 和 Capital Today 联合领投 [6],当时公司年经常性收入达 2100 万美元,用户超 800 万 [5]。Drama 3 发布约两个半月后,用户数已突破 1500 万 [4]。Fish Audio 的 2100 万美元 ARR 仅约为 ElevenLabs 报道的约 5 亿美元年化收入的 4% [5],但 Drama 3 现已超越 ElevenLabs 旗舰模型所在的独立排行榜。发布一个开放权重且基准领先的模型,既是研究成果,也是一种分发策略:它能将开发者的好感和 GitHub/Hugging Face 上的曝光度更快转化为付费 API 和订阅客户,使规模小得多的公司能够凭借成本效率,而非仅靠营销支出,挑战规模更大的现有巨头。

历史背景

Fish Audio 由前 Nvidia 研究员Shijia Liao创立,最初是一个开源语音生成项目。
Fish Audio 完成由 Coreline Ventures 和 Capital Today 领投的 5200 万美元种子轮融资,成立一年后披露年经常性收入达 2100 万美元,用户超 800 万。
Drama 3 的预览版在全面发布前宣布。
Fish Audio 在网页、iOS/Android 应用及 API 上全面公开发布 Drama 3,以开放权重形式推出,并在主要创意与推理平台实现上线首日集成。
Drama 3 继承自 Fish Audio 此前的模型系列:S1 使用括号标注情绪;S2-Pro 增加多说话人和自然语言控制;S2.1-Pro 提升音质与延迟,成为 Drama 3 之前 OpenRouter 上最热门的语音模型。

关键关系图

关键玩家
主题

Fish Audio 发布 Drama 3 语音 AI 模型

FI

Fish Audio

Drama 3 的开发者和发布方;一家成立一年的语音 AI 初创公司,由前 Nvidia 研究员 Shijia Liao 创立,发布时公司年经常性收入达 2100 万美元,用户超过 1500 万。

RI

Rissa Cao

Fish Audio 联合创始人兼首席执行官;将 Drama 3 定位为从语音生成向表演导演式控制的转变。

SH

Shijia Liao

Fish Audio 联合创始人兼首席科学家(前 Nvidia 研究员);阐述了音频修复和指令遵循能力背后的技术设计。

EL

ElevenLabs

现有竞争对手,其 v4 和 v4 Turbo 模型在 Artificial Analysis 发音鲁棒性排行榜上被 Drama 3 超越;Fish Audio 2100 万美元的年经常性收入约为 ElevenLabs 报告的约 5 亿美元年化收入的 4%。

AR

Artificial Analysis

独立基准测试机构,验证并公布了 Drama 3 在其文本转语音和发音鲁棒性排行榜上的第一名排名,同时指出该许可证属于“开放权重但无商业使用权”,而非完全开放源代码。

首发

首发合作伙伴(ComfyUI、Runway、OpenRouter、Pika Labs、OpenArt、Creatify、Vercel 等)

在 Drama 3 上线首日即完成集成的平台,使其能够立即进入创意与视频生成工具链的分发渠道。

CO

Coreline Ventures 和 Capital Today

Fish Audio 于 2026 年 7 月 28 日宣布的 5200 万美元种子轮融资的联合领投方,资助了公司对 Drama 3 的研发投入。

事实来源

9 条引用
  1. [1] Fish Audio Drama 3 model card on Hugging Face
  2. [2] Fish Audio Drama 3: the hype, the reactions, and the license catch
  3. [3] Fish Audio Drama 3 product announcement
  4. [4] Fish Audio launches Drama 3 press release
  5. [5] Fish Audio seed round and ElevenLabs competitive analysis
  6. [6] Coreline Ventures and Capital Today co-lead $52M Fish Audio seed round
  7. [7] Fish Audio Drama 3 wider launch report
  8. [8] Fish Audio developer docs: models and pricing overview
  9. [9] Fish Audio Drama 3 ComfyUI integration news

来源文章

Top 5

THE SIGNAL.

Analysts

“将 Drama 3 定位为从语音生成向导演式表演的类别转变,强调自然语言控制和迭代优化。”

Rissa Cao
Fish Audio 联合创始人兼首席执行官

“将词级音频修复描述为一种上下文感知的编辑方式,能保留周围语音特征。”

Shijia Liao
Fish Audio 联合创始人兼首席科学家

“反应在对 ElevenLabs 开放权重替代品的热情与对许可证条款及实际质量主张的怀疑之间分裂。”

dev.to 社区评论(聚合用户反馈)
开发者与社区情绪混合

“一些用户认为该许可证限制性强,并质疑模型的实际质量与其基准得分之间的差距。”

dev.to 社区评论(批判观点)
持怀疑态度的开发者反应
The Crowd

“$52M seed round. 15M+ users. But this is what we're most proud of yet. Introducing Drama 3: the most emotive and controllable TTS model in the world And yes, it's open-weight. You can now control how even a single word should sound, change its tone, and shift your voice”

@@FishAudio16086

“This is huge. Fish Audio just opened the weights of Drama 3, and it's the first open TTS model that sounds close to perfect to me. Other models can switch emotion mid-sentence. Drama 3 is the first one I've heard where it actually sounds right. Three tests against...”

@@niklaslenz_ai1635

“i've been making AI films for a while.. voice was always the weak part @FishAudio Drama 3 lets you direct it in plain language like "read it like you're fighting back tears" most emotive voice model i've tried”

@@abxxai50

“Fish Audio Drama 3 weights are out”

@u/mikemil82862
Broadcast
Fish Audio Drama 3 Is Here: The Most Controllable TTS Model Ever

Fish Audio Drama 3 Is Here: The Most Controllable TTS Model Ever

Fish Audio Drama 3 is Here

Fish Audio Drama 3 is Here

Fish Audio Drama 3 in ComfyUI: Generate Multi-Character Dialogue Scenes

Fish Audio Drama 3 in ComfyUI: Generate Multi-Character Dialogue Scenes