找回密码
 立即注册
查看: 10681|回复: 169

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模型

 火.. [复制链接]

签到天数: 10 天

[LV.3]偶尔看看II

593

主题

690

回帖

4万

积分

武林盟主

积分
46326

宣传达人灌水之王突出贡献荣誉管理论坛元老

QQ
发表于 2024-8-10 16:42:40 | 显示全部楼层 |阅读模式

SoVITS

SoVITS


GPT-SoVITS软件由RVC变声器创始人“花儿不哭”大佬开发,GPT-SoVITS的面世,彻底结束了语音克隆被商业垄断的历史,只要你有一张显卡,也能玩曾经高大上的语音克隆了。


说下V2版本的更新:(N卡,4G显存起,CPU也可以使用,慢如蜗牛)
新增两种语种,现在支持中、英、日、韩、粤物种语种,现在1分钟的参考音频就能训练出很好的效果。
对中英多音字做了优化,解决了旧版吞字的问题,情绪化复刻效果更加逼真了。

其他更多的效果大家自行体验,使用和之前的老版本类似。

软件下载后,解压出来,建议解压到非中文目录下,切记!
在所有操作前,准备好需要克隆的声音素材,要求无杂音,吐齿清晰,1-3分钟左右即可。
素材的质量,决定合成的效果。

解压后,运行 go-webui.bat,即可启动webUI界面,后期所有的操作,就在整个页面进行。

UI最上方有官方的使用教程手册,想系统的学习可以参考:https://www.yuque.com/baicaigongchang1145haoyuangong/ib3g1e

第一步:素材准备

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模 ...

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模  ...

填上参考音频的路径,就是需要克隆的音频保存路径,如上图,其他参数默认即可。然后点击“开启语音切割”

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模 ...

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模  ...

如果是中文,ASR 模型这里,建议用阿里的达摩ASR,ASR 模型尺寸根据显卡来,好卡选择large,识别更精准速度更快。
如果是英文或者日韩,ASR 模型这里用openAI的Whisper,ASR 模型尺寸同样根据显卡来,好卡选择large-V3,识别更精准速度更快。
其他参数默认,然后点击“开启离线批量ASR”,如上图



第二步:模型训练

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模 ...

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模  ...


素材准备好后,切换到 “1-GPT-SoVITS-TTS” ,填写 模型名称,其他参数可默认,如果对其他参数有兴趣研究,可以参考官方的文档进行自定义设置。
之后点“开启一键三连”,如上图。

随后切换到“1B 微调训练”选项卡,如下图,Batch_size和总轮数一般默认就很好了,也可以根据自己的素材和显卡来设置

1-GPT-SoVITS-TTS

1-GPT-SoVITS-TTS


第三步:推理

之后返回软件根目录,找到两个推理的批处理,如下图

1-GPT-SoVITS-TTS

1-GPT-SoVITS-TTS


显卡好的,比如30系、40系显卡,选择 “推理 半精度”,比如老的显卡,比如20系前的老卡,不支持半精度的选择 “推理 全精度”

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模 ...

【AI语音克隆】GPT-SoVITS V2版,业界最强的AI声音克隆软件、文本转语音工具,新增两种新语种,更强的V2模  ...


选择训练好的GPT和SoVITS模型,上传参考音频,输入参考音频文本,输入需要转换的文字,点“合成语音”即可!

下载地址:
百度网盘:
游客,如果您要查看本帖隐藏内容请回复
DEEPFACE论坛免责声明
本论坛发布的所有内容,包括图片、软件、模型等部分来自网络,版权归原作者所有。
本论坛提供的内容仅用于个人学习和研究,请勿滥用,否则由此引发的责任需自行承担。
请合理合法使用AI技术,并遵守当地法律法规,不要用于违法用途!
如本站发布内容侵犯了你的合法权益,请联系我们删除。

各种参数DFL换脸模型/实时换脸模型底丹、实时换脸模型训练教学/实时换脸模型定制、AI软件个性化定制
论坛所有一键包报错请在帖子下方跟帖,看到会回复,不支持一对一解答,请确认再下载!
全站默认解压密码: https://deepface.cc/ (密码就是这个网址,不要点开去找。复制完整网址即可,不要有空格)

该用户从未签到

0

主题

5

回帖

17

积分

初入江湖

积分
17

突出贡献

发表于 2024-8-10 20:57:11 | 显示全部楼层
感谢分享

该用户从未签到

0

主题

20

回帖

175

积分

无名之辈

积分
175
发表于 2024-8-11 02:52:52 | 显示全部楼层
真好真好,试试,感谢

该用户从未签到

0

主题

20

回帖

66

积分

无名之辈

积分
66

突出贡献

发表于 2024-8-11 03:12:07 | 显示全部楼层
感谢分享

该用户从未签到

0

主题

6

回帖

12

积分

初入江湖

积分
12
发表于 2024-8-11 09:06:16 | 显示全部楼层
新手报道,认真学习

该用户从未签到

0

主题

103

回帖

130

积分

无名之辈

积分
130
发表于 2024-8-11 11:47:49 | 显示全部楼层
谢谢分享,不知道对显存要求如何

该用户从未签到

0

主题

1

回帖

7

积分

初入江湖

积分
7
发表于 2024-8-11 16:31:37 | 显示全部楼层
感谢分享!

该用户从未签到

0

主题

7

回帖

26

积分

初入江湖

积分
26
发表于 2024-8-11 18:38:53 | 显示全部楼层
感谢分享~

该用户从未签到

0

主题

81

回帖

100

积分

无名之辈

积分
100
发表于 2024-8-12 08:52:12 | 显示全部楼层
期待更新中!!!!!!!!!!!!!!!!

该用户从未签到

0

主题

5

回帖

11

积分

初入江湖

积分
11
发表于 2024-8-12 11:23:26 | 显示全部楼层
非常感谢!
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|AIGC资源站

GMT+8, 2025-4-4 04:27 , Processed in 0.092974 second(s), 7 queries , Redis On.

Powered by Discuz! X3.5

©2001-2023 Discuz! Team

快速回复 返回顶部 返回列表