中文,在AI世界,好像突然一夜崛起了。
一直以来,AI绘图和AI声音,都有类似的痛点:
无法直出中文海报,以及克隆的中文声音几乎没法听。
而前者,随着上周的即梦v2.1,得到了很好的解决。后者,过往有N多产品试图去解决,但是解决的都很差。
闭源的有11labs,英文强到爆炸,中文几乎没法听总是一股子大佐味。开源的,有F5、GPT-sovits、ChatTTS等等,但是不仅本地部署使用困难,出来的情绪说实话,也不咋地。
而这个周末,中文的语音克隆痛点,我发现,被解决了。
幸福来的如此突然。
我直接给大家听一段我用克隆的AI唐国强老师,念满江红的语音。
请前往公众号查看视频
震撼的我头皮发麻。
玩了将近2年的AI声音了,我也是第一次见,能用中文念诗,念的如此情绪饱满的AI声音。
而这,仅仅只需要,30秒的音频素材就可以。
给我30秒,我就可以,偷走你的声音。
这个AI语音,来自MiniMax的海螺AI。
嗯,就是那个把人物情绪表演拉满,在海外AI视频圈大杀特杀的海螺AI。
周末我打开海螺AI,准备跑几个case视频的时候,意外的发现,他们悄悄的居然在海外版上线了Audio模块。
今年1月我就写过一篇海螺AI声音克隆的文章,但是那时候,只能在AI助手上,克隆你自己。
而现在,可以克隆任何人了。
在火速体验完以后,我终于可以说:
这就是当今最强的,AI中文语音克隆,没有之一。
一周时间,AI绘图和AI声音,中文世界两开花。
这两年,你知道我们是怎么过来的吗。
突然有点泪目,兄弟们,过年了,真的。
海螺AI Audio网址在此:https://www.
最顶上左边的就是Audio,刚刚新上的声音功能,最右边那个就是之前爆火的Video。
最爽的是,目前免费,不要钱。
海螺AI的Audio用起来也非常的简单,最左边的侧边栏,分为两个tab。
第一个是Text to Speech(TTS),也就是你克隆完的声音模型可以在这个地方进行文字生成音频了。
第二个就是Voices,可以在里面进行声音的克隆。
我做个case,给大家详细演示一下。
我们先进入到Voices页面。
直接点那个“创建您的声音克隆”按钮,目前每个人可以免费创建3个声音。
你可以上传语音,也可以直接录音。
上传的语音最少上传10s的音频片段就可以克隆了,不过这个样本其实不是特别够,所以我一般推荐音频素材最好在30s左右,当然你也可以更长,不过一般不需要超过5分钟。
这里我直接去B站,扒了一段唐国强老师在《三国演义》里面的朗诵片段。
扒出来的声音素材是这样的,你们可以听一下。
情绪起伏很大,抑扬顿挫拉满,非常完美的原始素材。
直接上传到海螺AI里面去。
有个降噪选项,可选可不选,如果你的素材比较纯净干净,可以不用。开的话可以帮你把一些背景音什么的都剔除掉。
最后需要选一下原始素材的语言,海螺AI支持12种语言,分别是:
中文、粤语、英语、韩语、日语、印尼语、西语、葡语、法语、意大利语、俄语、德语。
你的原始素材的语言是什么样的,就选什么语言,克隆出来的声音模型就会得到最好的效果,比如我上传的这个唐国强老师的素材是中文的,就选中文就行。
很快,大概只要几十秒的时间,唐国强老师的声音,就克隆好了。
回到TTS界面。
点击此位置,就可以切换到刚刚克隆完的唐国强老师的声音模型。
我们直接,让唐国强老师,来念一首李白的《将进酒》吧。
这首诗我太喜欢了,《长安三万里》李白那一段上天入地,驾鹤登仙的演绎,更是将这首诗在我心中的地位,推向了最巅峰。
我们直接把《将进酒》的最后一段扔进去。
“主人何为言少钱,径须沽取对君酌。五花马,千金裘,呼儿将出换美酒,与尔同销万古愁。”
海螺有个非常牛逼的点是,可以支持切换情绪。
目前有六种情绪:开心、生气、悲伤、惊讶、恐惧、厌恶。
《将进酒》的最后一段,在我的认知里,虽然一种愤慨,有一种激昂,但是底层情绪,确是悲凉的。
我只要一瞬,却也要让这世间,看到我这一瞬的光辉。
所以,在海螺AI的情感选择上,我选了悲伤。
点击生成,几秒钟的时间,一段语音,就出现在了你的面前。
请前往公众号查看音频
为了更加形象的展示,我把这段音频做了个照片驱动对口型,视频看起来更直观一些。
请前往公众号查看视频
又比如,我们可以再克隆一个林黛玉的声音。
让她来催一催鲜虾包。
请前往公众号查看视频
这声音,直接人麻了。
林黛玉的声音和情绪,都被还原到了极致。
而这句话,如果让11labs克隆林黛玉的声音来念呢,我给你们听一下,有多么的鬼畜。
这就是我在文章开头,说的一股子大佐味。
不是说11labs不好,11labs一直以来是世界上公认的最强的AI声音产品,但是在中文表现上,真的是没法用的状态。
而这一次,海螺AI挺身而出,终于,补足了中文领域几乎是空白的短板,把中文的声音克隆的音色相似度和情绪,推上了巅峰。
成功率也极高,我想说的是,我上面所有的case,全部是一遍直出,没有抽过一次卡,这点,真的难能可贵。
再给大家看一个影视飓风TIM的例子。
影视飓风是我最喜欢以及最崇拜的频道,没有之一。相信看过影视飓风的观众也都无数次听过TIM那句:
“Hello大家好,我是TIM,欢迎收看影视飓风。”
而这一次,我们让AI来说这句话,让大家听听,海螺AI的复刻有多么的强。
注意,为了避免拟合,所以我在上传到海螺AI的30秒TIM的素材里,是没有这句开场白的,都是他在聊一些别的东西。
AI直出如下,让李四维化身TIM:
跟我记忆中已经听过无数次的TIM的开场白,没有任何区别。
这就是现在海螺AI,能达到的程度。
这就是现在,最强的AI中文声音克隆,没有之一。
作为一个见证了这两年AI发展的亲历者,这一周的感受格外强烈。
从即梦让中文海报一夜之间"通关",到海螺AI让中文语音克隆达到了前所未有的高度,我仿佛看到了中文AI能力的爆发时刻。
想想两年前,我们还在为中文大模型和国际巨头的差距而焦虑。
那时的AI世界,几乎是英语的独角戏。
中文的存在感,就像是一个可有可无的配角。
但现在,这个局面正在被改写。
当我们能用AI轻松制作出中文海报,当唐国强老师的声音能被完美克隆,当林黛玉的语气都能被精准还原。
也许,这就是属于中文世界的AI时代的序章。
而这一切,才刚刚开始。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:卡兹克
>/ 投稿或爆料,请联系邮箱:wzglyay@gmail.com
4000520066 欢迎批评指正
All Rights Reserved 新浪公司 版权所有