Fish Audio Drama TTS模型
TECH

Fish Audio Drama TTS模型

25+
Signals

战略概览

  • 01.
    Fish Audio推出了Drama 3,宣称这是其构建过的最具可控性的文本转语音模型,用户可以用自然语言直接控制语调、节奏和角色,而无需手动组合音频标签。
  • 02.
    Drama 3是一个350亿参数的混合专家模型,每个token激活约30亿参数,支持83种语言,并已在Hugging Face上开放权重。
  • 03.
    Artificial Analysis确认Drama 3 Preview成为其文本转语音排行榜上新的第一名开源权重模型,并在其发音稳健性排行榜上领先于ElevenLabs的Eleven v4和v4 Turbo。
  • 04.
    此次发布伴随着5200万美元的种子轮融资,以及用户数超过1500万的声明,高于2026年7月融资完成时报告的800万用户。

实现精细控制的架构设计

Drama 3是一个350亿参数的混合专家模型,每个token仅激活约30亿参数[1][5],支持83种语言。其主打功能“音频修复”(audio inpainting)允许用户仅重新生成句子中的单个词,模型会聆听编辑前后两侧的音频,并匹配周围的语音、情绪和节奏[3][5],而无需重新渲染整句话。它还能在一次推理中生成完整的多角色场景,保持每个角色声音的独特性,并对前一句对话做出响应[3]。Fish Audio联合创始人兼首席科学家廖世佳表示,该模型“采用了一种新架构,实现了更好的控制和指令遵循能力”,并将可控性的跃升归功于此次架构重构[2]。

Drama 3的实际排名表现

Fish Audio和Artificial Analysis均称Drama 3 Preview为文本转语音排行榜上新的第一名开源权重模型,并在发音稳健性排行榜上领先于ElevenLabs的Eleven v4和v4 Turbo[4]。在这一特定指标上,Drama 3得分为93.2%,高于Eleven v4的91.7%和Eleven v4 Turbo的90.1%[1]。但这一说法比营销宣传更为局限:在Artificial Analysis更广泛的Provider Voice Arena排行榜中,该榜单基于数千次两两对比的Elo评分,Drama 3 Preview仅排名第10位,Elo得分为1243——仍落后于Eleven v4 Turbo(1330)和Eleven v4(1328),尽管这已是Fish Audio此前S2.1 Pro模型提升了101分的结果[4]。Fish Audio将Drama 3的API定价为每百万字符15美元,而Eleven v4为80美元,Eleven v4 Turbo为40美元[4]——这一成本优势对买家而言可能与榜单排名同等重要。

开放权重作为商业战略

Fish Audio在Hugging Face上以许可证形式发布了Drama 3的权重,年收入低于50万美元的公司及其关联方均可免费用于商业用途[1],明确吸引在VPC、本地部署、主权云或空气隔离环境中进行自托管部署[1]——这是ElevenLabs这类封闭式API服务商无法提供的模式。这种定位与外部分析师对竞争格局的解读一致:相关报道指出,Drama 3填补了专业长文本语音制作领域的空白——如有声书、游戏、多语言配音——通过音频修复实现的逐词编辑可避免重新渲染整段音频的成本[7]。然而,这种在单字编辑中高度保留语音、情绪和节奏的模型,也同时抬高了合成音频操控的保真度上限,这一风险已在对Fish Audio融资轮的广泛报道中被指出[6]。

融资、增长与早期反馈

Fish Audio于2026年7月底完成5200万美元种子轮融资,由Coreline Ventures和Capital Today联合领投,当时公司报告年经常性收入达2100万美元,用户数超过800万[6]。到2026年10月Drama 3发布时,公司称其用户基数已突破1500万[2],品牌搜索量同比增长740%[2]。市场反应积极:Fish Audio自身的公告获得了超预期的互动,一名X平台上的独立评测者表示Drama 3是首个真正听起来自然的开源TTS模型。唯一的手动评测视频认为Drama 3比Fish Audio此前的S2和S2.1 Pro模型更具表现力和情感,但也指出测试时该版本仍标记为“预览版”。Reddit上的讨论则聚焦于本地运行该模型的实际操作问题。

历史背景

Fish Audio于2025年正式推出商业服务,创始人廖世佳曾是Nvidia研究员,因对当时合成语音的平淡音色感到不满,曾在单个GPU上构建了早期语音生成模型。
Fish Audio完成5200万美元种子轮融资,由Coreline Ventures和Capital Today联合领投,融资时报告年经常性收入达2100万美元,用户数超过800万。
Fish Audio在fish.audio、其iOS/Android应用及API中全面上线Drama 3,同时在Hugging Face上发布fishaudio/drama-3的开放权重,并宣布完成5200万美元种子轮融资及1500万以上用户。
Artificial Analysis确认Drama 3 Preview成为其文本转语音排行榜上新的第一名开源权重模型,并在其发音稳健性排行榜上领先于Eleven v4和v4 Turbo。

关键关系图

关键玩家
主题

Fish Audio Drama TTS模型

FI

Fish Audio

总部位于帕洛阿尔托的语音AI初创公司,成立于2025年,开发并发布了Drama 3;同时提供开源权重、托管API和消费级应用,旨在吸引创作者、开发者和企业对语音AI的投入。

RI

Rissa Cao

Fish Audio联合创始人兼首席执行官;将Drama 3定位为从语音生成向表演指导的转变,强调公司赋予创作者对AI语音的导演级控制能力。

SH

Shijia Liao

Fish Audio联合创始人兼首席科学家,前英伟达研究员,曾在单个GPU上构建公司首个语音模型;现主导Drama 3在控制力和指令遵循能力方面的架构研发。

EL

ElevenLabs

现有闭源权重语音AI领域的领军企业,其Eleven v4和v4 Turbo模型是Drama 3的直接对标对象;目前仍位居整体Provider Voice Arena Elo排行榜首位,而Drama 3则在发音鲁棒性子项和开源权重类别中领先。

CO

Coreline Ventures and Capital Today

共同领投Fish Audio的5200万美元种子轮融资,支持其开源权重模式,其他投资方包括359 Capital、Parable、Play Time、Alphalist Partners、Bayhouse Ventures、Carya Venture Partners和HF0。

AR

Artificial Analysis

独立基准评测机构,其发音鲁棒性和文本转语音排行榜是Drama 3宣称排名的数据来源。

事实来源

7 条引用
  1. [1] Fish Audio Drama 3 Blog Announcement
  2. [2] Fish Audio Launches Drama 3 (PR Newswire)
  3. [3] Fish Audio Drama 3: AI Voice Direction and Audio Inpainting (Unite.AI)
  4. [4] Artificial Analysis Text to Speech Leaderboard
  5. [5] Fish Audio's Drama 3 Lets Developers Direct AI Voices Like a Film Script (AlphaSignal)
  6. [6] Fish Audio Raised $52M Seed for Voice-Cloning Tech (Tech Times)
  7. [7] Fish Audio's Drama 3 Model Targets High-Control Voice AI and Long-Form Media Demand (TipRanks)

来源文章

Top 1

THE SIGNAL.

Analysts

“将Drama 3描述为行业从仅生成语音的模型转向允许用户指导语音表演的模型的标志。”

Rissa Cao
联合创始人兼CEO,Fish Audio

“将Drama 3在可控性和指令遵循上的提升归因于新模型架构。”

Shijia Liao
联合创始人兼首席科学家,Fish Audio

“从投资者角度赞扬Fish Audio在团队规模相对较小的情况下实现的模型质量,这是其参与种子轮融资的理由。”

Rico Mallozzi
投资者,359 Capital
The Crowd

“$52M seed round. 15M+ users. But this is what we're most proud of yet. Introducing Drama 3: the most emotive and controllable TTS model in the world And yes, it's open-weight. You can now control how even a single word should sound, change its tone, and shift your voice”

@@FishAudio9355

“Fish Audio's Drama 3 Preview is the new #1 open-weights Text to Speech model on the Artificial Analysis Text to Speech leaderboard. The model also leads all models in our Pronunciation Robustness leaderboard, ahead of Eleven v4 and Eleven v4 Turbo”

@@ArtificialAnlys262

“This is huge. Fish Audio just opened the weights of Drama 3, and it's the first open TTS model that sounds close to perfect to me. Other models can switch emotion mid-sentence. Drama 3 is the first one I've heard where it actually sounds right.”

@@niklaslenz_ai206

“Fish Audio Drama 3 weights are out”

@u/mikemil82829
Broadcast
I Tested Fish Audio's S2.1 Pro & Drama 3 – Better Than ElevenLabs?

I Tested Fish Audio's S2.1 Pro & Drama 3 – Better Than ElevenLabs?

Fish Audio Drama TTS模型 — AI 新闻 | Agentic Brew