震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人
夕小瑶科技说 原创
作者 | 任同学
2024年3月21日,HeyGen 5.0 正式发布!这款革命性的AIGC产品将AI数字人的魔力融入视频创作,以其简洁易用的特性,让视频制作变得轻而易举。
只需几次点击,即可打造出令人惊叹的高品质视频作品!
不仅如此,HeyGen支持超过40种语言和多种口音,每一个数字人都是语言大师!
如此惊艳!
HeyGen 5.0 生成的数字人不仅可以保持口型同步,克隆语音语调,保留背景声,还能精准的识别和追踪用户的身体动作,如手部移动和手势!
让我们看看下面的视频,真的能发现违和感吗?
这样的手风琴动作真的太真实了吧hhh
想想看,我们甚至可以使用文本输入控制一个虚拟角色,并使其复制我们所期望的动作、姿态,让他说任何语言,并且难辨真假。
即便表演一段绕口令也不在话下!
值得一提的是,前一段时间,热传的 Taylor Swift 说普通话的视频片段也正是出自HeyGen之手。
轻松创作
HeyGen(原名“Movio”)由 Joshua Xu 和 Wayne Liang 于 2020 年 11 月在洛杉矶创立,它使用生成式 AI 在几分钟内创建令人惊叹的专业视频。
当前的 HeyGen 可以将用户的脚本转换为 40 多种语言下 300 多种语音的自然发音。
用户可以从代表不同种族、年龄和姿势的 100 多个 AI 头像中进行选择,并使其以自然的口型同步进行念稿。
HeyGen具有非常丰富的个性化设置,甚至会产生给游戏角色捏脸的错觉hh
1.丰富的官方形象
用户可以在 HeyGen 中能找到大量优质的数字形象,这里提供的所有头像都是基于使用真实演员的视频片段,因此质量和真实感都很不错!
2.自定义形象和声音
不仅仅局限于官方提供的数字形象,你也可以制作自己的数字人形象!
除了自定义形象,也能上传自定义的声音。操作也很简单,点击下图中的“Clone Voice”,只需要2-10分钟的录制,即可让HeyGen快速学习你的声音。
一次配置之后,每次用自己的配音都是原汁原味的!
最最重要的是,创作视频不用再NG了,那岂不是能省下大量的摸鱼时间!而完成视频的主要步骤,仅仅是提供一份文稿~
3.更多风格服饰
每个头像还有几种不同的服装,无论视频是要表现得更专业,还是更休闲,都有对应的服饰来匹配视频的基调。
在HeyGen中,个性化还不局限于此,我们还可以通过文本描述的形式,更自由地生成服装,就像要求 AI 给我的数字形象穿上一件“牛仔夹克和白色T恤”[1]:
几秒后就会得到穿上了“新时装”的数字形象:
4.文稿也能生成!
除了视频可以自动生成,HeyGen也接入了GPT4,编写视频剧本、提供创意、提升脚本质量统统不在话下!
不过该GPT已经被限制在视频剧本创作上了,笔者试了好多次,都没有办法让这个GPT回答其它问题,看来想要薅点HeyGen的GPT4羊毛是不太行了hhh。
“值不值得买”
目前的免费版本可生成长达一分钟的视频,但缺少了很多的个性化设置,比如100 多个 AI 头像、300 多个声音、自定义数字形象和语音等。
如果想访问更多特性和功能,还得考虑升级到他们的付费计划。
根据价格文档,每1个credit可以生成1分钟的视频。可是!月费59叨乐的Plan也只有30credit的视频。
这个成本值不值还真得让创作者自己去分析一波,咱也不清楚哇。
AI 风口上的社会问题
自从 2022 年 7 月推出视频制作应用后,借着AI的东风,HeyGen的发展不可谓不迅猛,至23年底,年度经常性收入已经攀升至 1800 万美元,并完成了多轮融资。
当下,HeyGen正在募集6000万美元规模的新一轮融资,公司投前估值达到4.4亿美元,较4个月前的估值水平增长了6倍。[2]
但是与疯狂增长的市值形成差别的是,HeyGen 背后的公司诗云科技(深圳)有限公司于2023 年 12 月 11 日因决议解散申请注销登记。
一些可能的原因是,HeyGen所提供的此类服务并不符合中国当前法规,其产生的视频有可能被用于欺骗性场景。
图片来源[3]
在近期,中国香港就发生了一起规模庞大的AI“深伪”诈骗案,涉及的金额达2亿港元。
这不仅是香港历史上损失最惨重的“变脸”案例,而且也是首次涉及AI“多人变脸”的诈骗案。
诈骗者利用AI仿造了高层管理人员的形象和声音并生成伪造视频,造成多人参与视频会议的效果,并对会议中唯一的真人财务实施诈骗。
随着AI伪造技术持续进化,辨别真伪的难度也会越来越大,加上该技术门槛不断降低,将诱使更多不法分子利用AI生成技术来实现诈骗。
在尝试利用AI进行创造的同时,大家也不要忘了保护自己的钱包呀,送上表情包:
参考资料
[1]https://twitter.com/xai/status/1773510159740063860[2]https://www.36kr.com/p/2707566836873093
[3]http://www.news.cn/legal/2023-06/08/c_1129679772.htm
微信扫码关注该文公众号作者