2小时就能训练出一个明星？AI版孙燕姿手艺剖析
2023-05-22
克日 ，AI“孙燕姿”爆火 ，其翻唱的《发如雪》《下雨天》短短几天就突破百万播放量 ，一度登上各大平台热搜榜首位 ，成为“新晋顶流” 。在B站在搜索框输入“AI”后 ，第一个词条就是“AI孙燕姿” 。除了孙燕姿外 ，尚有周杰伦、王心凌、许嵩、Lady Gaga等歌手也被网友制作出了「AI替身」 。有人说 ，这是2023年最火的声音 ，有人说 ，这是对真人歌手赤裸裸的侵权 ，尚有人说 ，这是AI手艺的新高度 ，AI将成为音乐创作的新工具 。
元境科技人工智能专家解读“AI孙燕姿”背后原理
“AI孙燕姿”凭什么能够云云爆火 ，让网友们喜欢不已 ，又是怎么做到云云拟真 ，实现靠近原唱效果的呢？为了搞明确背后的手艺原理 ，小编特意讨教了元境科技人工智能方面的专家 。相识到“AI孙燕姿”正是使用了当下最热门的人工智能手艺 ，通过建设神经网络模子 ，经由大宗音乐数据集训练 ，使得AI虚拟歌手的声音与真人歌手无异 。
“AI孙燕姿”使用的焦点手艺泉源于Sovits4.0歌声转换模子 ，基于so-vits-svc的开源项目制作 。歌声转换模子通过SoftVC内容编码器提取歌曲的音调、音高等特征 ，然后将每段音频做成几秒到十几秒不等的切片 ，然后将翻唱者的声音数据丢给算法拾取出来 ，再和歌曲的切片对应 。最后 ，再对天生的歌曲举行后期优化 ，好比加入混响或简朴修音 ，一首AI翻唱歌曲就制作完成了 。
Sovits4.0模子先容
Sovits4.0模子是一种歌声转换模子 ，它可以将一小我私家的声音转换成另一小我私家的声音 ，具有极高的准确性和逼真度 。这意味着“AI孙燕姿”可以通过该模子学习并模拟孙燕姿的音色和唱腔特点 ，从而创造出逼真的孙燕姿气概歌曲 。
模子的焦点手艺是SoftVC内容编码器 ，它基于深度学习和神经网络手艺 ，使用了一种称为变分自动编码器（Variational Autoencoder ，VAE）的架构 ，团结了条件天生对抗网络（Conditional Generative Adversarial Network ，CGAN）的头脑 。SoftVC内容编码器的目的是学习并提取人声中的内容信息 ，即与语义相关的特征 ，而忽略与语言人个体有关的特征 ，这样的疏散可以确保在举行歌声转换时 ，保存源音频的音乐内容 ，并将其转换为目的歌手的声音特征 。在这个历程中需要大宗的训练数据和一直重复迭代的训练 ，以使天生的效果尽可能靠近目的歌手 。
外国模子遇到中文歌 ，几多有些“水土不平”
不过虽说Sovits4.0模子天生的音乐在专业职员的调音后 ，有着不错的效果 ，可是模子自己未对中文歌曲做针对性优化 ，在海内使用几多有些“水土不平” 。天生中文歌曲时时时会泛起小瑕疵 ，需要大宗的手工精调才华出曲 ，关于通俗用户来说门槛过高 。若是想要实现较量好的效果 ，甚至还需要对模子举行Fine tuning 。同时也对训练的数据集要求很是严苛（需要歌手咬字清晰） ，一些唱法较量“萧洒”的歌手（不是在说咱周董哈~）学习效果就不是很理想了 。
之以是“AI孙燕姿”成为最火的AI歌手 ，乐成出圈 ，也正是由于孙燕姿的歌曲吐词清晰 ，适合作为训练数据集 ，以是模拟的效果最好 。现在Sovits4.0对训练数据集要求过严、使用门槛过高、中文歌曲天生效果不佳是该模子保存的显著问题 。
「MetaSurfing-元享智能云平台」华语AI音乐最佳选择
要说最相识咱们华语音乐的 ，那自然还得是咱们中国人自己 。正好最近尊龙时凯人生就是搏官网z6mg子公司元境科技的「MetaSurfing-元享智能云平台」免费开放 ，其内置的AI音频�？榧闪嗽晨萍甲匝械纳Ｗ� ，该模子学习了大宗中文曲目 ，针对华语音乐做了海量优化 ，把使用门槛降低到了“有手有嘴就行”（为此算法工程师小哥哥的头发都快掉光了） 。体现效果抵达了天下第一梯队水平 。用了元享智能云平台 ，AI版的你说未必就是下一个华语乐坛“新晋顶流” 。
不过元享智能云平台真的能抵达无门槛的上手难度吗？实践是磨练真理的唯一标准 ，小编决订婚自体验一番 。没想到从下载到天生歌曲 ，我这样没有任何音乐细胞和盘算机基础的新手小白竟然也能轻松玩转 。下面小编来教各人怎样使用元享平台创作AI歌曲 。
小白教程
第一步 翻开元享 ，录制一段二十分钟左右的文稿 ，这是为了给模子天生一段可以学习音色、音调等特征的素材 。让元享天生我们自己的声音模子 。
第二步 把这段录音上传到“元享智能云平台” ，然后喝上一杯咖啡 ，期待约半个小时左右的训练时间（云端训练 ，不占用外地资源哦~硬件层面也实现了无门槛） ，我们自己的个性化音色特征码就天生好了~
第三步 天生自己的AI音乐 ，分享到B站、抖音、朋侪圈 ，让自己AI作品刷屏社交网络 。
「MetaSurfing-元享智能云平台」 ，浅易的操作办法 ，先进的盘算模子 ，省去了AI翻唱歌曲所需的大宗繁琐事情 ，无需数据的预处置惩罚、名堂转换、文本转换、去噪、音量平衡等诸多操作 ，只需要将数据丢给元享智能云平台 ，稍等片晌就好了~
动起手来 ，创作属于你的音乐吧！
关于咱们通俗人来说 ，若是对音乐创作有兴趣 ，在元享这样的低门槛数字内容创作平台的加持下 ，下手原创出一首属于自己的歌曲已经很是容易 。以是无妨现在就动起手来！也许不到2小时你就能训练出一个AI明星~