Redian新闻
>
震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人

震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人

公众号新闻

夕小瑶科技说 原创
作者 | 任同学

2024年3月21日,HeyGen 5.0 正式发布!这款革命性的AIGC产品将AI数字人的魔力融入视频创作,以其简洁易用的特性,让视频制作变得轻而易举。

只需几次点击,即可打造出令人惊叹的高品质视频作品!

不仅如此,HeyGen支持超过40种语言和多种口音,每一个数字人都是语言大师!

如此惊艳!

HeyGen 5.0 生成的数字人不仅可以保持口型同步,克隆语音语调,保留背景声,还能精准的识别和追踪用户的身体动作,如手部移动和手势!

让我们看看下面的视频,真的能发现违和感吗?

这样的手风琴动作真的太真实了吧hhh

想想看,我们甚至可以使用文本输入控制一个虚拟角色,并使其复制我们所期望的动作、姿态,让他说任何语言,并且难辨真假。

即便表演一段绕口令也不在话下!

值得一提的是,前一段时间,热传的 Taylor Swift 说普通话的视频片段也正是出自HeyGen之手。

轻松创作

HeyGen(原名“Movio”)由 Joshua Xu 和 Wayne Liang 于 2020 年 11 月在洛杉矶创立,它使用生成式 AI 在几分钟内创建令人惊叹的专业视频。

当前的 HeyGen 可以将用户的脚本转换为 40 多种语言下 300 多种语音的自然发音

用户可以从代表不同种族、年龄和姿势的 100 多个 AI 头像中进行选择,并使其以自然的口型同步进行念稿。

HeyGen具有非常丰富的个性化设置,甚至会产生给游戏角色捏脸的错觉hh

1.丰富的官方形象

用户可以在 HeyGen 中能找到大量优质的数字形象,这里提供的所有头像都是基于使用真实演员的视频片段,因此质量和真实感都很不错!

2.自定义形象和声音

不仅仅局限于官方提供的数字形象,你也可以制作自己的数字人形象!

除了自定义形象,也能上传自定义的声音。操作也很简单,点击下图中的“Clone Voice”,只需要2-10分钟的录制,即可让HeyGen快速学习你的声音。

一次配置之后,每次用自己的配音都是原汁原味的!

最最重要的是,创作视频不用再NG了,那岂不是能省下大量的摸鱼时间!而完成视频的主要步骤,仅仅是提供一份文稿~

3.更多风格服饰

每个头像还有几种不同的服装,无论视频是要表现得更专业,还是更休闲,都有对应的服饰来匹配视频的基调。

在HeyGen中,个性化还不局限于此,我们还可以通过文本描述的形式,更自由地生成服装,就像要求 AI 给我的数字形象穿上一件“牛仔夹克和白色T恤”[1]:

几秒后就会得到穿上了“新时装”的数字形象:

4.文稿也能生成!

除了视频可以自动生成,HeyGen也接入了GPT4,编写视频剧本、提供创意、提升脚本质量统统不在话下!

不过该GPT已经被限制在视频剧本创作上了,笔者试了好多次,都没有办法让这个GPT回答其它问题,看来想要薅点HeyGen的GPT4羊毛是不太行了hhh。

“值不值得买”

目前的免费版本可生成长达一分钟的视频,但缺少了很多的个性化设置,比如100 多个 AI 头像、300 多个声音、自定义数字形象和语音等。

如果想访问更多特性和功能,还得考虑升级到他们的付费计划。

根据价格文档,每1个credit可以生成1分钟的视频。可是!月费59叨乐的Plan也只有30credit的视频。

这个成本值不值还真得让创作者自己去分析一波,咱也不清楚哇。

AI 风口上的社会问题

自从 2022 年 7 月推出视频制作应用后,借着AI的东风,HeyGen的发展不可谓不迅猛,至23年底,年度经常性收入已经攀升至 1800 万美元,并完成了多轮融资。

当下,HeyGen正在募集6000万美元规模的新一轮融资,公司投前估值达到4.4亿美元,较4个月前的估值水平增长了6倍。[2]

但是与疯狂增长的市值形成差别的是,HeyGen 背后的公司诗云科技(深圳)有限公司于2023 年 12 月 11 日因决议解散申请注销登记。

一些可能的原因是,HeyGen所提供的此类服务并不符合中国当前法规,其产生的视频有可能被用于欺骗性场景。

图片来源[3]

在近期,中国香港就发生了一起规模庞大的AI“深伪”诈骗案,涉及的金额达2亿港元。

这不仅是香港历史上损失最惨重的“变脸”案例,而且也是首次涉及AI“多人变脸”的诈骗案。

诈骗者利用AI仿造了高层管理人员的形象和声音并生成伪造视频,造成多人参与视频会议的效果,并对会议中唯一的真人财务实施诈骗。

随着AI伪造技术持续进化,辨别真伪的难度也会越来越大,加上该技术门槛不断降低,将诱使更多不法分子利用AI生成技术来实现诈骗。

在尝试利用AI进行创造的同时,大家也不要忘了保护自己的钱包呀,送上表情包:

参考资料

[1]https://twitter.com/xai/status/1773510159740063860
[2]https://www.36kr.com/p/2707566836873093
[3]http://www.news.cn/legal/2023-06/08/c_1129679772.htm

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
看“单亲妈”系列有感,家有儿女的必读只因这一个瑕疵,澳元价值直接“归零”!澳男网上吐槽引热议,网友纷纷表示不解数字社会|什么是数字人类学?OpenAI王炸更新GPT-4o,干掉所有语音助手!丝滑如真人引爆全网科幻成真!一张照片+音频=超逼真数字人视频!VASA-1模型拉开「实时交互」大幕AIGC时代数字化人才培养的密码,你掌握了吗?| DTDS 全球数字人才发展大会东软集团:生成式 AI 时代,如何布局 AI 人力资源战略?| DTDS 全球数字人才发展大会微软刚刚发布了VASA-1:单张照片生成超现实真人视频,还没开源但是性能SOTA花近千万买精装房,墙里竟抠出大量泡沫?开发商:属工艺瑕疵,不影响安全OpenAI藏了1年多的技术正式公开!15秒素材克隆声音,HeyGen也在用微软「诈骗届」王牌框架,真到可怕!一张照片+音频即可生成数字人AI早知道|HeyGen 发布5.0版本;微软将以6.5亿美元收购Inflection AI;剪映内测视频翻译功能《周处除三害》爆火,英文名为啥是「The Pig , The Snake and The Pigeon」?早鸟报|蚂蚁集团组织架构调整升级;美团上线“骑手商家互评通道”;快手电商发布数字人直播卖货规范...CVPR 2024 | 面部+肢体动画,一个框架搞定从音频生成数字人表情与动作凯特真人视频流出!网友:忽肿忽瘦,两周大变,你跟我说这是凯特?!hé bàng?hé bèng?46秒AI生成真人视频爆火,遭在线打假「换口型、声音」《华裔副总裁(第二部):突围》第五节:“耻感”扶桑早鸟报|刘强东数字人将开启直播首秀;抖音有效粉丝数少于500的本地生活达人不能视频带货;华为官宣p系列品牌升级为pura...40、长篇家庭伦理小说《嫁接》第十章 不期而遇(1)OpenAI一夜改写历史,GPT-4o干翻所有语音助手!丝滑如真人引爆全网科幻成真“刘强东”直播常态化,数字人成本低至真人直播的10%歪着斧子“侃侃”老每天学一句英语台词|​I get the picture新出的这个史诗级数据,震惊了全球!举菜刀追住户!墨尔本Mount Waverley华人曝惊人视频:多名歹徒嚣张入室!该怎么办?杭州/北京内推 | 阿里通义XR实验室招聘虚拟数字人脸表情/动作生成研究型实习生普京:“毫无疑问,台湾是中华人民共和国不可分割的一部分”。AI早知道|HeyGen推自动剪辑工具;智谱AI文生视频模型预计年内发布Glen Waverley华人曝惊人视频!大白天被亚裔男撬门入室!“Boxhill也是他”没有指数级数据就没有Zero-shot!生成式AI或已到达顶峰北京市数字人基地启用仪式暨数字人新业态研讨会举办童年故事(37):请君入瓮浓人,nèng死淡人
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。