Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

更新V2文档 #2

Merged
merged 4 commits into from
Nov 2, 2022
Merged
Show file tree
Hide file tree
Changes from all commits
Commits
File filter

Filter by extension

Filter by extension


Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
31 changes: 26 additions & 5 deletions README.md
Original file line number Diff line number Diff line change
@@ -1,13 +1,13 @@
# VITS 原神语音合成
# VITS 原神语音合成V2

本repo包含了我用于训练原神VITS模型对源代码做出的修改,以及新的config文件。

由于各种原因,模型和数据集暂无法公布,感兴趣可以自行提取,自行训练。

此外,也可以尝试使用公开的api:http://233366.proxy.nscc-gz.cn:8888/ 来进行尝试,此API可用于二创等用途,但禁止用于任何商业用途。
请注意多次生成的效果不会一致,可以多次尝试来选择一次较好的效果。
同时支持可视化合成:http://150.158.164.18:9069/
感谢星尘以及国家超级计算广州中心提供的算力支持,感谢VITS模型作者Jaehyeon Kim, Jungil Kong, and Juhee Son,本模型训练时使用的所有音频文件版权属于米哈游科技(上海)有限公司。
此外,也可以尝试使用公开的api:[http://245671.proxy.nscc-gz.cn:8888/ ](http://245671.proxy.nscc-gz.cn:8888/?text=%E4%BD%A0%E5%A5%BD%E5%91%80&speaker=枫原万叶)来进行尝试,此API可用于二创等用途,但禁止用于任何商业用途。
可视化合成在写了
感谢星尘以及国家超级计算广州中心提供的算力支持,感谢VITS模型作者Jaehyeon Kim, Jungil Kong, and Juhee Son,感谢ContentVEC作者 Kaizhi Qian.
本模型训练时使用的所有音频文件版权属于米哈游科技(上海)有限公司。

支持的说话者:
['派蒙', '凯亚', '安柏', '丽莎', '琴', '香菱', '枫原万叶',
Expand All @@ -22,6 +22,27 @@

Query String 参数:

| 参数 | 类型 | 值 |
| ------------- | ------------- | ------------ |
| text | 字符串 | 生成的文本,支持常见标点符号。英文可能无法正常生成,数字请转换为对应的汉字再进行生成。 |
| speaker | 字符串 | 说话者名称。必须是上面的名称之一。 |
| noise | 浮点数 | 生成时使用的 noise_factor,可用于控制感情等变化程度。默认为0.667。 |
| format | 字符串 | 生成语音的格式,必须为mp3或者wav。默认为mp3。 |

示例:[http://233366.proxy.nscc-gz.cn:8888/?text=你好&speaker=枫原万叶](http://245671.proxy.nscc-gz.cn:8888/?text=你好speaker=枫原万叶)



# VITS 原神语音合成V1


此外,也可以尝试使用公开的api:http://233366.proxy.nscc-gz.cn:8888/ 来进行尝试,此API可用于二创等用途,但禁止用于任何商业用途。
请注意多次生成的效果不会一致,可以多次尝试来选择一次较好的效果。
同时支持可视化合成:http://150.158.164.18:9069/
感谢星尘以及国家超级计算广州中心提供的算力支持,感谢VITS模型作者Jaehyeon Kim, Jungil Kong, and Juhee Son,本模型训练时使用的所有音频文件版权属于米哈游科技(上海)有限公司。

Query String 参数:

| 参数 | 类型 | 值 |
| ------------- | ------------- | ------------ |
| text | 字符串 | 生成的文本,支持常见标点符号。英文可能无法正常生成,数字请转换为对应的汉字再进行生成。 |
Expand Down
4 changes: 3 additions & 1 deletion requirements.txt
Original file line number Diff line number Diff line change
Expand Up @@ -5,6 +5,8 @@ numpy==1.18.5
phonemizer==2.2.1
scipy==1.5.2
tensorboard==2.3.0
torch==1.6.0
torchvision==0.7.0
Unidecode==1.1.1
pypinyin
pypinyin_dict
jieba