阿里开源TTS CosyVoice 再升级!语音克隆玩出新花样,支持流式输出,本地部署实测

最近,语音克隆领域精彩迭出!

前段时间刚分享过升级版 FishSpeech:

17k star!开源最快语音克隆方案,FishSpeech 焕新升级,本地部署实测

最近看到阿里开源的 CosyVoice 又发布了重大更新。

今日分享,将介绍 CosyVoice 2.0,并带大家本地部署体验,为本地 TTS 选型提供参考。

1. CosyVoice 简介

项目简介:https://funaudiollm.github.io/cosyvoice2/

与已有 TTS 方案相比,CosyVoice 在多语言语音生成、零样本语音生成、跨语言语音生成、富文本和自然语言细粒度控制方面,表现出色。可见之前的分享:

CosyVoice 实测,阿里开源语音合成模型,3s极速语音克隆

相比旧版,CosyVoice 2.0 有哪些亮点?

  • 离线和流式一体化建模:成功实现双向流式语音合成,目前主流方案(CosyVoice,F5-TTS,MaskGCT,GPT-SoViTs等)均不支持流式,FishSpeech 1.5 除外。

  • 多语言支持:中文、英文、日语、韩语等,以及多种中国方言(粤语、四川话、上海话、天津话、武汉话等)
  • 跨语言支持:支持跨语言的零样本语音克隆。
  • 超低延迟:接收5个文字即可合成首包音频,延迟低至 150 毫秒;
  • 超高精度:在Seed-TTS评估集的硬测试集上取得最低的字符错误率。
  • 音色一致性:确保零样本和跨语言语音合成的可靠语音一致性。
  • 韵律和音质:在韵律、音质和情感对齐方面显著增强,MOS评分从5.4提高到5.53,接近商业化TTS水平。
  • 可控音频生成:支持更精细的情感控制和方言口音调整,可模仿机器人、小猪佩奇的风格讲话。

本次更新,预训练模型同样开源。

下面我们实操本地部署,看看效果如何?

2. 本地部署

项目地址:https://github.com/FunAudioLLM/CosyVoice

首先,下载项目仓库,安装环境依赖。

git clone https:/
### 构建 Vue 邮箱输入框自动补全组件 为了创建一个适用于 Vue 项目的邮箱输入框自动补全组件,可以基于 `vuejs-autocomplete` 组件库来构建[^2]。此方案不仅能够提供基本的自动完成功能,还支持通过远程数据源获取建议列表。 #### 自动补全组件基础结构 首先安装依赖项: ```bash npm install vuejs-autocomplete --save ``` 接着,在项目中引入并配置该插件: ```javascript import Vue from 'vue'; import Autocomplete from 'vuejs-autocomplete'; Vue.use(Autocomplete); ``` 随后定义一个新的组件用于处理电子邮件地址的特殊需求: ```html <template> <div class="email-input"> <!-- 使用 v-model 双向绑定 value --> <autocomplete :search="searchEmails" placeholder="请输入电子邮箱..." aria-label="邮箱输入框" @submit="onSubmit" ref="autocomplete" /> </div> </template> <script> export default { data() { return { emails: [] }; }, methods: { async searchEmails(text) { // 这里可以根据实际业务逻辑调整查询方式 const response = await fetch(`/api/search-email?q=${text}`); this.emails = await response.json(); return this.emails.map(email => ({ label: email, value: email })); }, onSubmit(item) { console.log(`Selected Email: ${item.value}`); } } }; </script> ``` 上述代码片段展示了如何利用现有的 `vuejs-autocomplete` 实现了一个简单的邮件输入框,并且实现了异步加载候选邮箱的功能。 对于更复杂的场景,比如需要过滤本地存储的数据或是结合其他验证规则,则可能还需要进一步扩展这个例子中的方法和属性设置。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值