当前位置: 首页 > article >正文

GPT-SoVITS更新V3 win整合包

GPT-SoVITS 是由社区开发者联合打造的开源语音生成框架,其创新性地融合了GPT语言模型与SoVITS(Singing Voice Inference and Timbre Synthesis)语音合成技术,实现了仅需5秒语音样本即可生成高保真目标音色的突破。该项目凭借其开箱即用的特性,已成为AIGC语音领域的热门工具。

功能:

  1. 零样本文本到语音(TTS): 输入 5 秒的声音样本,即刻体验文本到语音转换。

  2. 少样本 TTS: 仅需 1 分钟的训练数据即可微调模型,提升声音相似度和真实感。

  3. 跨语言支持: 支持与训练数据集不同语言的推理,目前支持英语、日语、韩语、粤语和中文。

  4. WebUI 工具: 集成工具包括声音伴奏分离、自动训练集分割、中文自动语音识别(ASR)和文本标注,协助初学者创建训练数据集和 GPT/SoVITS 模型。

GPT-SoVITS-V3 win整合包下载:

https://pan.quark.cn/s/f3d782bea7ee

GPT-SoVITS-V3新增特点:

  • 训练集增加至7k小时 (MOS分音质过滤、标点停顿校验)

  • s2结构变更为:shortcut Conditional Flow Matching Diffusion Transformers (shortcut-CFM-DiT)。由于s2占整体延时比例太低,s2变复杂对于整体耗时影响不大。【说人话就是s2变复杂了但训练轮数变少了,整体训练时长不变】s2原理的变更(基于参考音频扩散补全)导致音色相似度大幅提升。由于没用端到端合成,使用了开源的24k的BigVGANv2参数从mel谱得到波形。

  • s1结构不变,更新了一版参数

语种主持(可跨语种合成)GPT训练集时长SoVITS训练集时长推理速度参数量文本前端功能
V1(2024年1月发布)中日英2k小时2k小时baseline90M+77Mbaselinebaseline
V2(2024年8月更新)中日英韩粤2.5k小时vq encoder2k小时,剩余5k小时翻倍90M+77M中日英逻辑均有增强新增语速调节,无参考文本模式,更好的混合语种切分,音色混合
V3(2025年2月更新)中日英韩粤7k小时vq encoder2k小时,剩余7k小时约等于v2330M+77M不变大幅增加zero shot相似度;情绪表达、微调性能提升

⚠️在开始之前,你必须同意并遵循使用规约,在任何音视频网站发布基于 GPT-SoVITS 项目或本整合包制作的作品时,需要对GPT-SOVITS工具进行署名,否则违反开源协议。


http://www.kler.cn/a/553711.html

相关文章:

  • 【云原生】SpringCloud-Spring Boot Starter使用测试
  • CST案例:UAV无人机RCS --- 双站,I求解器,比例缩放
  • 大模型驱动的业务自动化
  • 轻量级5G核心网:适应未来网络需求的关键方案
  • 基于VLC的Unity视频播放器(三)
  • DeepSeek VS OpenAI:AI巨头应用对比
  • node.js里的bind,apply, call的区别是什么
  • MoE 与 FFN、Transformer 的关系
  • 以太网交换基础(涵盖二层转发原理和MAC表的学习)
  • 组学数据分析实操系列 |(四) 富集气泡图的绘制
  • Vue 3 使用 Vue-ECharts 的实践心得
  • 用python进行二分法查找(python实例三十)
  • 20250219 隨筆 [特殊字符] 查看短鏈的實現方式與解決方案優化
  • 【Linux】认识协议、Mac/IP地址和端口号、网络字节序、socket套接字
  • 【架构】分层架构 (Layered Architecture)
  • RT-Thread+STM32L475VET6——ADC采集电压
  • 挑选出行数足够的excel文件
  • 同步异步日志系统-日志落地模块的实现
  • 【进阶】redis篇
  • 敏捷与DevOps