Bendi新闻
>
成立不足两年,融资8000 万美元,晋升独角兽行列,这款 AI 语音克隆应用到底有多强?

成立不足两年,融资8000 万美元,晋升独角兽行列,这款 AI 语音克隆应用到底有多强?

10月前

又一个只有很少的员工,创造出 10 亿美元独角兽企业的故事诞生了。
这两天,ElevenLabs 紧随着自己融资 8000 万的新闻,在 X 上接连发了一则招聘启事和一条宣传片,以将自己的团队规模,从 40 人扩大到 100 人。
原版视频是英语,我们用 ElevenLabs 做了一个中文版,全程耗时 5 分钟:
产品本身不是什么新出的产品,ElevenLabs成立于 2022 年,像是文字转语音和语音克隆功能也是 2023 年出的。这次伴随融资新闻和宣传片的传播,让这家公司彻底被大众所熟知。
用ElevenLabs做了个李云龙的 Demo,大家感受下:

“You're the fucking political commissar, with eyes like a cow's balls,

who the fuck snitched on me?”
产品页面目前看起来简洁且清晰,全都集中在左上角:
开头的视频号我们就是直接用视频多语言翻译(Dubbing)这个功能做的。
具体步骤比把大象装冰箱都要简单:

1、粘贴你想翻译的视频的链接(甚至都不用下载);

2、选择源语言和目标语言,并点击 Create。
然后……等待大概 3 分钟左右,Done。
这时候生成的视频,就已经可以使用了,但也可以进一步编辑。
在编辑页面可以重新选择说话人的声音,通过多条音轨,每句话是由谁说的都可以自己设定。
能通过设置三个选项对声音进行微调:

1、Stability 代表稳定性,这个参数的高低,会影响语音语调的变化。过高会有些死板,过低会不够稳定。

2、Similarity 代表着相似程度,越高就越像源声音,但过高也会出现一些莫名其妙、并不存在的声音。

3、Style 代表语音的风格,与上传的音频相比,数值越高风格越夸张。设置成 0 会提高生成速度。
在这个产品里,只有这三个参数是通过数据调节。
目前体验下来,这款产品在中文上的表现,基本上跟现实里外国人说中文的感觉一模一样,这种差异在赛博世界也难以避免。
而且还会有一些非常诡异的 BUG,比如说驴(lv)会读成路(lu)。
不过,刚才我们使用的语音克隆,都是即时语音克隆模式,当付费到Creator级别(每月 22 美元)以后,可以解锁专业声音克隆模式(Professional Voice Cloning)。
在这种模式下,光看这些需求,一股名为“专业”的感觉就扑面而来:

1、 提交声音后需要等待 4 周才能使用克隆的声音

2、尽量使用专业录音设备进行录制;

3、录音时建议使用防喷罩;

4、在经过声学处理的房间里进行录制;

5、需要录制至少 30 分钟,最好 3 个小时的声音素材等。

Google 网页翻译
我提交了 30 分钟的我自己的声音素材,当然也并没有他说的哪些专业设备,就是想看看 4 周以后看看会有什么更厉害的效果。到时候再给大家汇报。
目前ElevenLabs支持 29 种语言,除了中文都还可以。国内目前也已经有了一些类似的产品,但还没听说有哪一款特别爆火。如果有哪些很好用,也希望各位推荐安利一波。
先不说任何商用的场景,就只说整活上,这种克隆语音的加入可以说能完全改变 B 站鬼畜区的格局了。简单做了个小鬼畜:


欢迎加入这个星球,见证硅基时代发展↓


点个在看,再走吧👀

微信扫码关注该文公众号作者

来源:硅星人Pro

相关新闻

骗子花5美元两分钟就能用AI克隆你家人语音 如何不上当受骗?致富新思路! 他靠卖乐高两年赚了50万美元?Vision Pro刚开卖,竟炒到9万块!苹果到底有多强?苹果 Vision Pro 上手!这玩意卖两万多,真的合适吗?有华人退税1万多美元!如何查看2024 年退税了没有?一文知道所有!知名女演员被欠薪1250万元?涉事公司成立一年多就“消失”,拿到投资款7天后就暂停拍摄……错过这两个多月就得多投400多万!你还坐得住吗?苹果头显到底有多火?Vision Pro十天卖出20万台,网友:库克50亿已到账!仅22.5万美元开局,AI制药界新锐如何跨越“寒冬”完成近2亿美元融资?7年花8340万,上海静安寺这间亚洲最大苹果店,到底有多酷?苹果季报惨淡?壕掷千亿美元回购,市值大涨超万亿元,库克回应AI和中国市场2年血亏$25万!大多伦多2房Condo降价后$50万出手!网友“强拍?捡漏!"太突然!AI总龙头跳水大跌,两天蒸发1.6万亿!英伟达见顶了吗?多空双方争议大...520不知该送啥?这两款护发好物,送人自用超合适!003航母到底有多强?福建舰到底有多强?ChatGPT 的对话框过时了?这款 AI 产品提供了一种很新的聊天方式逼退外机的J20,到底有多强?头油、头屑多?这款宝藏洗发水帮你过上3天不洗头的生活!Sora世界模型 与 OpenAI宫斗戏 - AI到底有多强大?你用的筷子到底有多脏?这双用潜艇材质做的筷子不长菌,拒绝病从口入年费 12 万美元?在线赌场因 Cloudflare 涨价被迫停运2024年,BIM到底有多火?谁能真正把AI用起来?这款新产品希望把AI融入每个人的日常工作|100个革新产品(7/100)
logo
联系我们隐私协议©2024 bendi.news
Bendi新闻
Bendi.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Bendi.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。