AI 生成的影片《The Frost》全球首映 !氛围拉满, 网友一致好评 !个人电影时代开始 ?
Waymark -《The Frost》
全部由 AI 生成的影片《冰霜》
由DALL-E 2 、 D-ID、Mj 等生成。
在《冰霜》剧情中,最初的几个镜头中就展现了一种神秘、令人不安的氛围。茫茫冰冷的山脉,军用帐篷搭建的临时营地,一群人围着火堆,狗在吠叫着 、山谷中冰冷刺骨的寒风吹着 ...
比如这里: “把尾巴递给我,”有人说。镜头切换到一个男人在火边啃着一块粉红色肉干的特写镜头。太奇怪了。他嘴唇的动作不太对劲。有那么一瞬间,他看起来就像是在咀嚼自己冰冻的舌头。
为了制作《冰霜》,Waymark 采用了该电影导演公司执行制片人 Josh Rubin 编写的剧本,并将其输入图像制作模型 DALL-E 2中。经过一番尝试和错误,让模型以他们满意的风格生成图像。
电影制片人使用 DALL-E 2 生成每个镜头。然后他们使用 D-ID(一种可以为静态图像添加运动的人工智能工具)来制作这些镜头的动画,使眼睛眨动和嘴唇移动。
“ 我们用 DALL-E 回馈给我们的东西建造了一个世界,这是一种奇怪的美学,但我们张开双臂欢迎它。它成为了电影的外观。”
鲁宾说:
“这无疑是我看过的第一部风格一致的生成人工智能电影,”独立电影制片人兼专门从事创意技术咨询公司 Bell & Whistle 的联合创始人 Souki Mehdaoui 说道。“生成静态图像并操纵它们给它一种有趣的拼贴氛围。”
《Frost》是使用各种生成式人工智能工具制作的短片之一。最好的生成视频模型仍然只能生成几秒钟的视频。展示了各种各样的风格和技术,从故事板式的静态图像序列(如《 冰霜》)到许多不同的几秒长视频剪辑的混搭。
今年2月和3月,生产视频制作人工智能工具的Runway在纽约举办了人工智能电影节。亮点包括 Laen Sanches 创作的超凡脱俗的PLSTC,这是由图像制作模型 Midjourney 生成的一系列奇怪的、塑料包裹的海洋生物,令人眼花缭乱;Jake Oleson 的梦幻般的Give Again,使用了一种名为 NeRF(神经辐射场)的技术,可将 2D 照片转换为 3D 虚拟物体;还有 Sam Lawton 的《Expanded Childhood》的超现实怀旧风格,这是一张劳顿家庭旧照片的幻灯片,他让 DALL-E 2 将其扩展到了边界之外,可以恢复老照片中那些半记得的细节。
AI生成视频的又快又便宜
会成为未来的趋势吗?
艺术家和一些设计师,往往是第一个尝试新技术的人,Waymark 制作The Frost是为了探索如何将生成式人工智能内置到其产品中。该公司为寻求快速、廉价的广告制作方式的企业提供视频创作工具。Waymark 是几家初创公司之一,与 Softcube 和 Vedia AI 等公司一样,只需点击几下即可为客户提供定制视频广告。
Waymark 目前的技术于今年年初推出,汇集了多种不同的人工智能技术,包括大型语言模型、图像识别和语音合成,以动态生成视频广告。Waymark 还利用了为以前的客户创建的非人工智能生成的广告大数据集。“我们有数十万个视频,”首席执行官亚历克斯·珀斯基-斯特恩 (Alex Persky-Stern) 说。“我们汲取了其中最好的东西,并对其进行了训练,了解优秀视频的外观。”
Waymark 的工具是分层订阅服务的一部分,起价为每月 25 美元,要使用该工具,用户只需提供公司名称和位置即可。该工具首先会抓取该企业的网站和社交媒体帐户中的文本和图像。然后,它使用这些数据生成广告,使用 OpenAI 的 GPT-3 编写脚本,通过合成语音在突出显示业务的选定图像上大声朗读。
几秒钟内即可生成一分钟长的精美广告:
用户可以根据需要编辑结果、调整脚本、编辑图像、选择不同的声音等等。Waymark 表示,迄今为止已有超过 100,000 人使用过其工具。(您可以在此处观看 Waymark 的人工智能生成的广告之一。)
Waymark 的下一个想法是使用生成式人工智能为尚未拥有或不想使用已有图像和视频的企业创建图像和视频。“这就是制作《冰霜》的动力,”创作人帕克说。“创造一个世界,一种氛围。”
“通过 15 分钟的反复试验,您就可以得到您想要的、完全适合序列的镜头。” 将影片剪辑在一起并需要特定的镜头,例如山坡上靴子的特写镜头。有了 DALL-E,他就可以直接调用它。“这令人兴奋,”他说。“从那时起,作为一名电影制片人,这开始成为一次真正令人大开眼界的经历。”
伦敦一家制作短视频的初创公司 Private Island 的联合创始人克里斯·博伊尔 (Chris Boyle) 也回忆起去年他对图像制作模型的第一印象:“当时我感到一阵眩晕,‘这将改变一切。’”
包括 Bud Light、Nike、Uber 和 Terry's Chocolate,还为《使命召唤》等热门游戏制作了游戏内短片。
《私人岛屿》在后期制作中使用人工智能工具已有几年,但在疫情期间有所增加。“在封锁期间,我们非常忙碌,但无法像以前那样进行拍摄,所以当时我们开始更多地倾向于机器学习,”博伊尔说。
该公司采用了一系列技术,使后期制作和视觉效果变得更加容易,例如使用 NeRF 从 2D 图像创建 3D 场景,以及使用机器学习从现有镜头中提取动作捕捉数据,而不是从头开始收集数据。
但生成式人工智能是新领域。几个月前,Private Island 在其 Instagram 账户上发布了一段恶搞啤酒广告,该广告是使用 Runway 的视频制作模型 Gen-2 和 Stability AI 的图像制作模型 Stable Diffusion 制作的。它成为了缓慢燃烧的病毒式热门产品。
这段名为《Synthetic Summer》的视频展示了典型的后院派对场景,无忧无虑的年轻人在阳光下悠闲地喝着饮料。
这是电影制作新时代的开始吗?
Frost和“Synthetic Summer”都发挥了制造它们的技术的优势。Frost非常适合 DALL-E 2 令人毛骨悚然的美感。“Synthetic Summer”有许多快速剪辑,因为像 Gen-2 这样的视频生成工具一次只能生成几秒钟的视频,然后需要将其拼接在一起。博伊尔说,这适用于一切都很混乱的派对场景。《私人岛屿》还考虑制作一部武侠电影,快速剪辑适合这个主题。
这可能意味着我们将开始看到音乐视频和广告中使用生成视频。但除此之外,尚不清楚。Mehdaoui 表示,除了实验艺术家和一些品牌之外,目前还没有很多人使用它。
Waymark 正在计划制作《The Frost》的续集,
但它不会在 DALL-E 2 上出售。
“我想说这更像是一种‘观看这个空间’之类的东西,”Persky-Stern 说。“当我们做下一个项目时,我们可能会使用一些新技术,看看它能做什么。”
《私人岛屿》也在尝试其他电影。今年早些时候,它制作了一个视频,其中包含ChatGPT制作的脚本和 Stable Diffusion 制作的图像。现在,该公司正在制作一部混合电影,真人演员穿着由 Stable Diffusion 设计的服装。
“我们非常热衷于审美,”博伊尔说,并补充说,这是数字文化中主导图像的变化,数字文化已被简化为表情符号和故障效果。“看到新的美学将来自何处是非常令人兴奋的。生成式人工智能就像我们的一面破碎的镜子。”
来源 | 曦语子(ID:YUXIENDLESS)
作者 | 行小曦 002;编辑 | 呼呼大睡
内容仅代表作者独立观点,不代表早读课立场
微信扫码关注该文公众号作者