一句话让马斯克“上天”变成3D动画！生成式AI技术进入爆发期！

AI生成视频赛道，又要发生大地震了！

短短一个月不到，就有多家顶级开发商打造出新一代视频生成模型，并且推出的功能每次都刷新大家对于AI的认知，可以说卷到极致了！

究竟生成式AI又出现了哪些“黑科技”？下面一起了解近期推出的新AI视频生成模型都有什么新玩法！

近期，美国AI创业公司Pika Labs发布了其首个产品Pika 1.0，引起了业界的广泛关注。这款产品具备生成和编辑3D动画、动漫、卡通和电影等多种类型视频的能力。

其官方发布的展示视频因其惊人的视觉效果而迅速走红，为AI视频制作行业带来了新的想象空间。Pika目前的估值已达到2亿至3亿美元之间，并成功获得了5500万美元的融资。

Pika 1.0的一个亮点是其能够仅凭一句话就生成高质量的3D动画。

例如，通过输入简单的指令“马斯克穿着太空服，3D动画”，用户可以立即生成一个准备登上太空的马斯克动画版本。该视频在外观、动作、背景等方面的真实度堪比高成本制作的3D动画。

此外，Pika 1.0还能对现有视频素材中的元素进行编辑和替换。用户可以轻松更改视频中的尺寸、服装、甚至为视频中的动物角色添加配饰，比如给“猩猩”戴上墨镜。

Pika 1.0还可以根据视频素材直接扩展视频的画布超尺寸，生成16:9、9:16、1:1和5:2不同高宽比的内容，更方便创作者适配各种视频平台。

根据用户提供的视频素材，配合提示词来制作不同风格的动画，从像素风到写实到黑白幻灯片特效，演示出的5种风格迁移，轻松涵盖了现有电影和动画的主流风格。

Pika 1.0的核心功能包括：文本和图像生成视频、编辑更改视频元素、切换视频风格以及调整视频宽高比等。当前，Pika 1.0已开放申请试用，公司正致力于改进算法和开发过滤受版权保护材料的模型。

Stability.ai发布了他们的Stable Video Diffusion视频模型，该模型只需要一张图像作为输入，即可快速生成一段高质量的视频。

1）文生图

SD可以根据输入的文字描述生成相应的图像。用户可以输入关键词或短语，SD会根据这些描述生成具有相应特征的图像。

2）图生图

SD还可以根据已有的图像生成新的图像。例如，用户可以上传一张真实照片，SD会根据照片的特征生成具有相似风格的新图像。

3）控制生成过程

SD提供了多种方法来控制图像生成过程，如使用Lora模型、ControlNet等。这些方法可以帮助用户更精确地控制生成图像的风格、姿势、线条等特征。

4）高度可定制

SD允许用户调整各种参数，如迭代步数、采样方法、重绘幅度等，以实现对生成图像的精细控制。支持物体从单一视角到多视角的转化，也就是3D合成：

根据外部评估，官方宣称SVD甚至比runway和Pika的视频生成AI更受用户欢迎。虽然目前只发布了基础模型，但官方透露“正计划继续扩展，建立类似于Stable Diffusion的生态系统”。

RunwayGen-2模型可以直接使用文本生成视频场景， 使用户可以使用文本提示生成“逼真的视频内容”并“自动剪辑视频”。

其中给Gen-2打造的新功能——动态笔刷Motion Brush，在任意图片上一抹就能变成动态视频，生成视频的效果已经让人看不到AI的效果，堪称为里程碑式产品。

还率先推出了26个无需复杂提示就能选用的视频滤镜：

更新先进的相机控制，以允许更细的控制级别，可以使用小数来调整相机的移动，使画面可以更精确地移动。

Meta GenAI 发布全新文本生成视频模型Emu Video，该模型生成过程分为两个步骤：首先根据文本生成图像，然后根据文本和生成的图像生成视频。

在人工评估中，该模型生成视频的质量好于现有的所有方法——81% vs. Google的Imagen Video，90% vs. Nvidia的PYOCO，96% vs. Meta的Make-A-Video。

比起AI绘画领域，AI视频的整体要求更高，不仅要强调画面的精美，还要考虑每个动作的衔接。

结合市场的需求来看，AI视频的应用场景更广，包括游戏、动画等领域，都能借助模块化的AI工具降低开发难度，丰富产品的内容，实现开发者与玩家之间的“双赢”。