哔哩哔哩自研语音生成大模型IndexTTS-2.0 正式开源
创始人
2025-09-09 18:49:06

IT之家 9 月 9 日消息,B站(Bilibili)昨日(9 月 8 日)发布公告,宣布正式开源其自研语音生成大模型 IndexTTS-2.0,是首个支持精确时长控制(Duration Control)的自回归(Autoregressive)零样本文本转语音(TTS)系统。

IT之家援引 GitHub 页面介绍,相比较传统逐 token 生成的 TTS 系统,IndexTTS-2.0 首次在自回归架构中实现了精准时长控制,特别适合视频配音等需严格音画同步的应用场景。

据介绍,IndexTTS2 支持两种生成模式:

  • 一种可通过明确指定生成的 token 数实现精确时长控制;
  • 另一种则自由生成,保持输入提示的韵律特征。

在声音表达上,IndexTTS2 实现了情感特征与说话人音色的解耦(Emotion-Speaker Disentanglement):分离说话人音色与情绪特征,分别控制。

这意味着用户可以独立指定音色来源和情绪来源,例如用一段音频保留音色,再用另一段不同情感的音频或文本描述赋予情绪,在零样本条件下,模型能精准还原目标音色并完全重现指定情绪。

为提升高情感表达下的语音清晰度,团队引入了 GPT 潜在表示,并设计三阶段训练策略增强生成稳定性。此外,他们基于 Qwen3 微调实现了“软指令”机制,允许用户通过自然语言描述来直观控制情绪方向,降低使用门槛。

在技术性能上,多数据集实验表明,IndexTTS2 在词错率、说话人相似度和情绪保真度上均超越当前最先进零样本 TTS 模型。其方法具备良好扩展性,可应用于其他大型自回归 TTS 系统。团队表示,将公开代码和预训练权重,推动学术研究与产业落地。

  • 技术报告地址:https://arxiv.org/abs/2506.21619
  • 仓库地址:https://github.com/index-tts/index-tts
  • Demo 展示地址:https://index-tts.github.io/index-tts2.github.io
⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

海顺证券投资推荐的股票怎么样?... 海顺证券投资推荐的股票怎么样?屡屡亏损真相揭露,夸大荐股实力骗取服务费,一步教你轻松退回如果在上述A...
海顺证券投资投顾推荐的股票一直... 海顺证券投资投顾推荐的股票一直跌。不可信抓紧维权如果在上述APP平台上被骗,建议立即采取以下措施挽回...
海顺证券投资投顾夸大收益坑害股... 海顺证券投资投顾夸大收益坑害股民被骗可退费如果在上述APP平台上被骗,建议立即采取以下措施挽回损失:...
海顺证券投资投顾交费炒股被骗不... 海顺证券投资投顾交费炒股被骗不要慌!保留证据可挽回如果在上述APP平台上被骗,建议立即采取以下措施挽...
海顺证券投资是正规公司吗?,误... 海顺证券投资是正规公司吗?,误导性宣传诱导缴费,,荐股亏损教你一步追回!如果在上述APP平台上被骗,...
海顺证券投资可靠吗?虚假营销坑... 海顺证券投资可靠吗?虚假营销坑骗股民不可靠,一招教你挽回损失!98000已退款!如果在上述APP平台...
海顺证券投资可靠不推荐股票亏损... 海顺证券投资可靠不推荐股票亏损严重?服务费退费方法来了,别再傻傻被割韭菜!如果在上述APP平台上被骗...
海顺证券投资荐股是真的吗?误导... 海顺证券投资荐股是真的吗?误导性宣传!交费被忽悠,想跟着赚钱结果反倒亏了钱,退费流程解析如果在上述A...
海顺证券投资服务费退款攻略,避... 海顺证券投资服务费退款攻略,避开坑,快速拿回自己的钱!如果在上述APP平台上被骗,建议立即采取以下措...
海顺证券投资都是骗局!被骗十多... 海顺证券投资都是骗局!被骗十多万可以挽回!如果在上述APP平台上被骗,建议立即采取以下措施挽回损失:...
海顺证券投资带人炒股怎么样?,... 海顺证券投资带人炒股怎么样?,诱导夸大宣传荐股服务!,可挽回!如果在上述APP平台上被骗,建议立即采...
海顺证券投资不正规,亲身经历揭... 海顺证券投资不正规,亲身经历揭秘老师带单真相如果在上述APP平台上被骗,建议立即采取以下措施挽回损失...
海顺证券投资不可信!员层层引诱... 海顺证券投资不可信!员层层引诱升级缴费亏损不止!误导性宣传欺骗股友服务费!被骗交费已退!如果在上述A...
海顺证券投资29800元服务费... 海顺证券投资29800元服务费是真的吗? 虚假宣传欺诈消费者荐高位股!误导性宣传坑惨股友!专业人士教...
海能直播间诱导,夸大荐股收益,... 海能直播间诱导,夸大荐股收益,误导性宣传欺骗股友服务费!被骗交费已退如果在上述APP平台上被骗,建议...
海能业务员画大饼,推荐的股票一... 海能业务员画大饼,推荐的股票一直跌还能信吗?退费流程公布!如果在上述APP平台上被骗,建议立即采取以...
海能误导交费后,与宣传不服!业... 海能误导交费后,与宣传不服!业务员画大饼,层层升级诱导缴费,一步教你轻松退费!如果在上述APP平台上...
海能投资正规吗能退服务费吗? ... 海能投资正规吗能退服务费吗? 服务费揭秘可以退!误导性宣传欺骗股民可退费!如果在上述APP平台上被骗...
海能投资推荐股票是真的吗?背后... 海能投资推荐股票是真的吗?背后圈套细思极恐!股友愤怒不已!可退款如果在上述APP平台上被骗,建议立即...
海能投资投顾割韭菜,十多万投顾... 海能投资投顾割韭菜,十多万投顾费被骗!套路都一样,维权别再走弯路如果在上述APP平台上被骗,建议立即...
海能投资亏损不断还能退吗?手把... 海能投资亏损不断还能退吗?手把手教你!被骗服务费要回!如果在上述APP平台上被骗,建议立即采取以下措...
海能投资夸大收益,诱导交费,投... 海能投资夸大收益,诱导交费,投顾虚假宣传揭秘!3-15工作日依法成功退款流程如果在上述APP平台上被...
海能投资荐股可信吗?保留记录教... 海能投资荐股可信吗?保留记录教你如何退款!流程公布!退款如下!如果在上述APP平台上被骗,建议立即采...
海能投资荐股可靠吗,亲身经历揭... 海能投资荐股可靠吗,亲身经历揭露投资骗局黑幕!,一步教你快速退回!如果在上述APP平台上被骗,建议立...
海能投资合法吗? 荐股没赚到还... 海能投资合法吗? 荐股没赚到还亏?服务费已退回!如果在上述APP平台上被骗,建议立即采取以下措施挽回...