一个基于VITS的简单易用的语音转换(变声器)框架,开源变声模型【RVC】
下面是其中的一个人声与AI人声的合作案例
这是up主和自己的AI歌声合唱的视频,其中用到了变声使用框架:RVC和DiffSinger开源项目
标题:中日双语花海!我和自己的ai合唱了!
链接:https://www.bilibili.com/video/BV1QP411X7A6/
https://player.bilibili.com/player.html?aid=313817550&bvid=BV1QP411X7A6&cid=1135051269&page=1&high_quality=1&autoplay=0
下面这是AI的声音协力、视频制作的up主在评论区所分享的技术要点:
介于旧版未能展示笔记全文,把笔记要点整理如下
1 由九三本人授权素材,@花儿不哭 使用开源变声模型【RVC】训练AI声库模型并等待后续推理。
2 使用开源歌声合成引擎【DiffSinger】模仿九三唱法进行虚拟歌姬调教作为输入源。
a. 获取東北きりたん歌唱データベース同意利用规约获取开源数据并训练
b 利用Synthesizer V 制谱(1.9及以后需要冻结实参),感谢@某只泽 老师的原始谱面,我加了一些自己对93、周杰伦、中孝介对花海演绎的理解。
c 使用OpenSVIP工程转换后得到USTX工程,使用OpenUTAU调教:对特色转音、咬字进行最终调整。第一次调日文,比较生疏。
d 作为输入源使用RVC进行换声推理,并进行后续混音。
在此感谢九三小姐姐的演唱、花儿不哭大佬的RVC模型训练,以及在幕后辛勤工作的DiffSinger全体开发者、日语数据集标注者、模型训练者,在合规的情况下为大家展示AI的可能性。最后,DiffSinger是一款开源歌声合成SVS工具,在有本人授权和充足时间和标注的情况下,可以先制作AI声库,再直接用midi和歌词进行翻唱,继续改善细微的跨语种口音差异,以及拓展词曲创作赋能虚拟歌姬的上限。关注AI的同学们可以在了解简单易用的几种变声器工具的同时,关注不断在发展的DiffSinger项目。
b站视频教程
【RVC】全新Al变声器一键训练包发布!10分钟克隆你的声音!_哔哩哔哩_bilibili
感谢您的来访,获取更多精彩文章请收藏本站。
1. 资源都是经过站长或作者收集测试修改后发布分享。转载请在文内以超链形式注明出处,谢谢合作!
2. 本站除原创内容,其余所有内容均收集自互联网,仅限用于学习和研究目的,本站不对其内容的合法性承担任何责任。如有版权内容,请通知我们或作者删除,其版权均归原作者所有,本站虽力求保存原有版权信息,但因众多资源经多次转载,已无法确定其真实来源,或已将原有信息丢失,所以敬请原作者谅解!
3. 本站用户所发布的一切资源内容不代表本站立场,并不代表本站赞同其观点和对其真实性负责,若您对本站所载资源作品版权归属存有异议,请留言附说明联系邮箱,我们将在第一时间予以处理 ,同时向您表示歉意!为尊重作者版权,请购买原版作品,支持您喜欢的作者,谢谢!
4. 本站一律禁止以任何方式发布或转载任何违法的相关信息,访客如有发现请立即向站长举报;本站资源文件大多存储在云盘,如发现链接或图片失效,请联系作者或站长及时更新。
暂无评论内容