Redian新闻
>
震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人

震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人

公众号新闻

夕小瑶科技说 原创
作者 | 任同学

2024年3月21日,HeyGen 5.0 正式发布!这款革命性的AIGC产品将AI数字人的魔力融入视频创作,以其简洁易用的特性,让视频制作变得轻而易举。

只需几次点击,即可打造出令人惊叹的高品质视频作品!

不仅如此,HeyGen支持超过40种语言和多种口音,每一个数字人都是语言大师!

如此惊艳!

HeyGen 5.0 生成的数字人不仅可以保持口型同步,克隆语音语调,保留背景声,还能精准的识别和追踪用户的身体动作,如手部移动和手势!

让我们看看下面的视频,真的能发现违和感吗?

这样的手风琴动作真的太真实了吧hhh

想想看,我们甚至可以使用文本输入控制一个虚拟角色,并使其复制我们所期望的动作、姿态,让他说任何语言,并且难辨真假。

即便表演一段绕口令也不在话下!

值得一提的是,前一段时间,热传的 Taylor Swift 说普通话的视频片段也正是出自HeyGen之手。

轻松创作

HeyGen(原名“Movio”)由 Joshua Xu 和 Wayne Liang 于 2020 年 11 月在洛杉矶创立,它使用生成式 AI 在几分钟内创建令人惊叹的专业视频。

当前的 HeyGen 可以将用户的脚本转换为 40 多种语言下 300 多种语音的自然发音

用户可以从代表不同种族、年龄和姿势的 100 多个 AI 头像中进行选择,并使其以自然的口型同步进行念稿。

HeyGen具有非常丰富的个性化设置,甚至会产生给游戏角色捏脸的错觉hh

1.丰富的官方形象

用户可以在 HeyGen 中能找到大量优质的数字形象,这里提供的所有头像都是基于使用真实演员的视频片段,因此质量和真实感都很不错!

2.自定义形象和声音

不仅仅局限于官方提供的数字形象,你也可以制作自己的数字人形象!

除了自定义形象,也能上传自定义的声音。操作也很简单,点击下图中的“Clone Voice”,只需要2-10分钟的录制,即可让HeyGen快速学习你的声音。

一次配置之后,每次用自己的配音都是原汁原味的!

最最重要的是,创作视频不用再NG了,那岂不是能省下大量的摸鱼时间!而完成视频的主要步骤,仅仅是提供一份文稿~

3.更多风格服饰

每个头像还有几种不同的服装,无论视频是要表现得更专业,还是更休闲,都有对应的服饰来匹配视频的基调。

在HeyGen中,个性化还不局限于此,我们还可以通过文本描述的形式,更自由地生成服装,就像要求 AI 给我的数字形象穿上一件“牛仔夹克和白色T恤”[1]:

几秒后就会得到穿上了“新时装”的数字形象:

4.文稿也能生成!

除了视频可以自动生成,HeyGen也接入了GPT4,编写视频剧本、提供创意、提升脚本质量统统不在话下!

不过该GPT已经被限制在视频剧本创作上了,笔者试了好多次,都没有办法让这个GPT回答其它问题,看来想要薅点HeyGen的GPT4羊毛是不太行了hhh。

“值不值得买”

目前的免费版本可生成长达一分钟的视频,但缺少了很多的个性化设置,比如100 多个 AI 头像、300 多个声音、自定义数字形象和语音等。

如果想访问更多特性和功能,还得考虑升级到他们的付费计划。

根据价格文档,每1个credit可以生成1分钟的视频。可是!月费59叨乐的Plan也只有30credit的视频。

这个成本值不值还真得让创作者自己去分析一波,咱也不清楚哇。

AI 风口上的社会问题

自从 2022 年 7 月推出视频制作应用后,借着AI的东风,HeyGen的发展不可谓不迅猛,至23年底,年度经常性收入已经攀升至 1800 万美元,并完成了多轮融资。

当下,HeyGen正在募集6000万美元规模的新一轮融资,公司投前估值达到4.4亿美元,较4个月前的估值水平增长了6倍。[2]

但是与疯狂增长的市值形成差别的是,HeyGen 背后的公司诗云科技(深圳)有限公司于2023 年 12 月 11 日因决议解散申请注销登记。

一些可能的原因是,HeyGen所提供的此类服务并不符合中国当前法规,其产生的视频有可能被用于欺骗性场景。

图片来源[3]

在近期,中国香港就发生了一起规模庞大的AI“深伪”诈骗案,涉及的金额达2亿港元。

这不仅是香港历史上损失最惨重的“变脸”案例,而且也是首次涉及AI“多人变脸”的诈骗案。

诈骗者利用AI仿造了高层管理人员的形象和声音并生成伪造视频,造成多人参与视频会议的效果,并对会议中唯一的真人财务实施诈骗。

随着AI伪造技术持续进化,辨别真伪的难度也会越来越大,加上该技术门槛不断降低,将诱使更多不法分子利用AI生成技术来实现诈骗。

在尝试利用AI进行创造的同时,大家也不要忘了保护自己的钱包呀,送上表情包:

参考资料

[1]https://twitter.com/xai/status/1773510159740063860
[2]https://www.36kr.com/p/2707566836873093
[3]http://www.news.cn/legal/2023-06/08/c_1129679772.htm

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
一张照片+音频=超逼真数字人视频!VASA-1模型拉开「实时交互」大幕举菜刀追住户!墨尔本Mount Waverley华人曝惊人视频:多名歹徒嚣张入室!该怎么办?CVPR 2024 | 面部+肢体动画,一个框架搞定从音频生成数字人表情与动作早鸟报|蚂蚁集团组织架构调整升级;美团上线“骑手商家互评通道”;快手电商发布数字人直播卖货规范...数字社会|什么是数字人类学?新出的这个史诗级数据,震惊了全球!东软集团:生成式 AI 时代,如何布局 AI 人力资源战略?| DTDS 全球数字人才发展大会没有指数级数据就没有Zero-shot!生成式AI或已到达顶峰《周处除三害》爆火,英文名为啥是「The Pig , The Snake and The Pigeon」?40、长篇家庭伦理小说《嫁接》第十章 不期而遇(1)早鸟报|刘强东数字人将开启直播首秀;抖音有效粉丝数少于500的本地生活达人不能视频带货;华为官宣p系列品牌升级为pura...普京:“毫无疑问,台湾是中华人民共和国不可分割的一部分”。“刘强东”直播常态化,数字人成本低至真人直播的10%AI早知道|HeyGen推自动剪辑工具;智谱AI文生视频模型预计年内发布hé bàng?hé bèng?OpenAI一夜改写历史,GPT-4o干翻所有语音助手!丝滑如真人引爆全网科幻成真童年故事(37):请君入瓮每天学一句英语台词|​I get the picture看“单亲妈”系列有感,家有儿女的必读杭州/北京内推 | 阿里通义XR实验室招聘虚拟数字人脸表情/动作生成研究型实习生OpenAI藏了1年多的技术正式公开!15秒素材克隆声音,HeyGen也在用Glen Waverley华人曝惊人视频!大白天被亚裔男撬门入室!“Boxhill也是他”AIGC时代数字化人才培养的密码,你掌握了吗?| DTDS 全球数字人才发展大会只因这一个瑕疵,澳元价值直接“归零”!澳男网上吐槽引热议,网友纷纷表示不解花近千万买精装房,墙里竟抠出大量泡沫?开发商:属工艺瑕疵,不影响安全OpenAI王炸更新GPT-4o,干掉所有语音助手!丝滑如真人引爆全网科幻成真!歪着斧子“侃侃”老微软「诈骗届」王牌框架,真到可怕!一张照片+音频即可生成数字人《华裔副总裁(第二部):突围》第五节:“耻感”扶桑浓人,nèng死淡人凯特真人视频流出!网友:忽肿忽瘦,两周大变,你跟我说这是凯特?!微软刚刚发布了VASA-1:单张照片生成超现实真人视频,还没开源但是性能SOTA北京市数字人基地启用仪式暨数字人新业态研讨会举办46秒AI生成真人视频爆火,遭在线打假「换口型、声音」AI早知道|HeyGen 发布5.0版本;微软将以6.5亿美元收购Inflection AI;剪映内测视频翻译功能
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。