Redian新闻
>
成立不足两年,融资8000 万美元,晋升独角兽行列,这款 AI 语音克隆应用到底有多强?

成立不足两年,融资8000 万美元,晋升独角兽行列,这款 AI 语音克隆应用到底有多强?

公众号新闻

又一个只有很少的员工,创造出 10 亿美元独角兽企业的故事诞生了。
这两天,ElevenLabs 紧随着自己融资 8000 万的新闻,在 X 上接连发了一则招聘启事和一条宣传片,以将自己的团队规模,从 40 人扩大到 100 人。
原版视频是英语,我们用 ElevenLabs 做了一个中文版,全程耗时 5 分钟:
产品本身不是什么新出的产品,ElevenLabs成立于 2022 年,像是文字转语音和语音克隆功能也是 2023 年出的。这次伴随融资新闻和宣传片的传播,让这家公司彻底被大众所熟知。
用ElevenLabs做了个李云龙的 Demo,大家感受下:

“You're the fucking political commissar, with eyes like a cow's balls,

who the fuck snitched on me?”
产品页面目前看起来简洁且清晰,全都集中在左上角:
开头的视频号我们就是直接用视频多语言翻译(Dubbing)这个功能做的。
具体步骤比把大象装冰箱都要简单:

1、粘贴你想翻译的视频的链接(甚至都不用下载);

2、选择源语言和目标语言,并点击 Create。
然后……等待大概 3 分钟左右,Done。
这时候生成的视频,就已经可以使用了,但也可以进一步编辑。
在编辑页面可以重新选择说话人的声音,通过多条音轨,每句话是由谁说的都可以自己设定。
能通过设置三个选项对声音进行微调:

1、Stability 代表稳定性,这个参数的高低,会影响语音语调的变化。过高会有些死板,过低会不够稳定。

2、Similarity 代表着相似程度,越高就越像源声音,但过高也会出现一些莫名其妙、并不存在的声音。

3、Style 代表语音的风格,与上传的音频相比,数值越高风格越夸张。设置成 0 会提高生成速度。
在这个产品里,只有这三个参数是通过数据调节。
目前体验下来,这款产品在中文上的表现,基本上跟现实里外国人说中文的感觉一模一样,这种差异在赛博世界也难以避免。
而且还会有一些非常诡异的 BUG,比如说驴(lv)会读成路(lu)。
不过,刚才我们使用的语音克隆,都是即时语音克隆模式,当付费到Creator级别(每月 22 美元)以后,可以解锁专业声音克隆模式(Professional Voice Cloning)。
在这种模式下,光看这些需求,一股名为“专业”的感觉就扑面而来:

1、 提交声音后需要等待 4 周才能使用克隆的声音

2、尽量使用专业录音设备进行录制;

3、录音时建议使用防喷罩;

4、在经过声学处理的房间里进行录制;

5、需要录制至少 30 分钟,最好 3 个小时的声音素材等。

Google 网页翻译
我提交了 30 分钟的我自己的声音素材,当然也并没有他说的哪些专业设备,就是想看看 4 周以后看看会有什么更厉害的效果。到时候再给大家汇报。
目前ElevenLabs支持 29 种语言,除了中文都还可以。国内目前也已经有了一些类似的产品,但还没听说有哪一款特别爆火。如果有哪些很好用,也希望各位推荐安利一波。
先不说任何商用的场景,就只说整活上,这种克隆语音的加入可以说能完全改变 B 站鬼畜区的格局了。简单做了个小鬼畜:


欢迎加入这个星球,见证硅基时代发展↓


点个在看,再走吧👀

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
逼退外机的J20,到底有多强?15家美国芯片公司,计划向越南投资80亿美元传字节成立新部门,发力 AI 应用;马斯克穿防弹衣访以色列,洗清反犹嫌疑;16% 的 AI 工作者使用开源模型2023年投融资报告:414家中国企业完成IPO,同比下降19%;深创投收获22个IPO;中金资本、英伟达捕获最多新晋独角兽谷歌王者归来?最新推出的大模型到底有多强估值超 300 亿元量子计算独角兽诞生!这家初创企业宣布完成 18 亿元融资独角兽十余年变迁轨迹透析:平均估值下滑,竞争加剧,韬光养晦时代开启|独角兽企业洞察报告(2013-2023)个人感慨之二十 专制政治的弊端运载火箭研发商东方空间获近6亿元投资;AI公司ElevenLabs估值11亿美元,跻身独角兽丨投融资周报 01.20-01.26刚搬新家不足两月 芝加哥华人夫妇死亡 疑为谋杀自杀OpenAI「19个黑手党」出走创业,融资近80亿美元!华人科学家占比近1/3逆流而上,欧卡智舶获新一轮亿元融资,冲刺国内民用无人船独角兽企业险资新年"开闸"!出资99.99亿,成立不动产私募基金!有何谋划?小宝宝的好奇心有多强?印度首家AI独角兽诞生!成立仅1年当独角兽的发明者不再相信独角兽上海某三甲医院主治自爆被拦在晋升门外多年,没想到靠它发高分SCI顺利晋升!成立不到2年已有商业化产品,立生生物掘金宠物医药市场从规培到副高,某三甲医院医学博士:手握病例,晋升不愁!(附发文秘籍)1分钟复刻明星语音,这家AI创企开年跻身独角兽背靠Biocon,融资2500万美元,开发5万美元的CAR-T疗法11月江苏新增6家独角兽企业,领跑全国丨投融资月报大疆机场2暴力测试!行业无人机究竟有多强?62、长篇民国小说《永泰里》第十三章 螳螂捕蝉(1)Vision Pro刚开卖,竟炒到9万块!苹果到底有多强?AI哄女友应用上线爆火;OpenAI CEO赴韩讨论AI芯片合作;AI语音克隆创企跻身独角兽丨AIGC大事日报2024《读库》征订| 这个纯靠口碑火起来的读书品牌到底有多强?互联网校招 | ByteDance字节跳动24届校招补录48小时倒计时!行业独角兽,各地有岗,免费三餐,互联网独角兽又一独角兽诞生!AI 语音克隆彻底火了拆迁不给钱、不给房,广州「房票安置」来了?冯仑:满足两大条件才能流通金碧辉煌卢浮宫告急!美国头号毒株肆虐,感染率一周翻倍,致病性有多强?个人感慨之二十一 屁股与脑袋个人感慨之十九 奥密克戎来袭美国马里兰大学对朱令中毒的研究:凶手一定要致朱令于死地!凶手必须满足两个条件!
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。