AI知识库

53AI知识库

学习大模型的前沿技术与行业应用场景


23.5k Star!OpenVoice:这款AI工具能够精准模仿你的声音并说出任何语言!
发布日期:2024-06-23 06:07:07 浏览次数: 2114 来源:AI进修生



从一小段音频中复制声音并生成多种语言的语音。它不仅支持精准的音色克隆,还可以灵活控制语音风格,如情感和口音,确保声音输出自然流畅。

体验地址:

https://app.myshell.ai/zh/web3/chat

准确的音色克隆

OpenVoice 可以准确克隆参考音色并生成多种语言和口音的语音。

灵活的语音风格控制

OpenVoice 可以对语音风格(例如情感和口音)以及其他风格参数(包括节奏、停顿和语调)进行精细控制。在这里,我们演示了对生成声音的情感和口音的控制。

零样本跨语言语音克隆

参考语音和生成的语音可以是海量说话人多语言数据集之外的任何语言。在下面的例子中,我们使用“U”来表示未见过的语言。

如何使用

以下涉及到的链接无法跳转,请参考如下原教程文档链接

https://github.com/myshell-ai/OpenVoice/blob/main/docs/USAGE.md

Linux安装

本节仅供熟悉Linux、Python和PyTorch的开发人员和研究人员使用。克隆此存储库,并运行

conda create -n openvoice python=3.9
conda activate openvoice
git clone git@github.com:myshell-ai/OpenVoice.git
cd OpenVoice
pip install -.

无论您使用V1还是V2,上述安装过程都是相同的。

OpenVoice V1

这里下载检查点,并将其解压缩到checkpoints文件夹中。

1. 灵活的语音风格控制。 请参阅demo_part1.ipynb以了解OpenVoice如何实现对克隆声音的灵活风格控制的示例用法。

2. 跨语言语音克隆。 请参阅demo_part2.ipynb以了解在MSML训练集中看到或未看到的语言的示例。

3. Gradio演示。 我们在这里提供了一个简约的本地gradio演示。如果用户在使用gradio演示时遇到问题,我们强烈建议用户查看demo_part1.ipynbdemo_part2.ipynbQnA。使用python -m openvoice_app --share启动本地gradio演示。

OpenVoice V2

这里下载检查点,并将其解压缩到checkpoints_v2文件夹中。

安装MeloTTS

pip install git+https://github.com/myshell-ai/MeloTTS.git
python -m unidic download

演示用法。 请参阅demo_part3.ipynb以了解OpenVoice V2的示例用法。现在它原生支持英语、西班牙语、法语、中文、日语和韩语。

更多配音相关

下面两个灰色的,一个是微软最新的神经网络配音网页资源,一个是实时配音:唯有入梦rvc

获取:

链接:https://pan.baidu.com/s/16aG3_cZPVjvkkd-QWuKmOw?pwd=1234 提取码:1234

除此以外这个视频介绍了使用 GPT4语音api的教程:

https://www.bilibili.com/video/BV1P64y1E72W/


—  —



53AI,企业落地应用大模型首选服务商

产品:大模型应用平台+智能体定制开发+落地咨询服务

承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

与创始人交个朋友

回到顶部

 
扫码咨询