不用等Sora了!生成视频王者宝座易主!Luma效果完全碾压Sora,不用排队免费可用!
作者 | 付奶茶
Sora还未真正推出,但竞争对手却不断增加~
除了快手的可灵,美国初创公司Luma AI也宣布加入了文生视频这一领域,发布了Dream Machine开放试用。
与Sora和可灵不同,它完全向公众开放!!不再是只通过预告片来看能力,而是所有人都能真实地看到水平如何!!
推特上的网友已经放出了一批试用的生成视频,但据说现在由于用户过多,服务器已经挤爆了。。。。
有网友将Pika、RUNWAY、LUMA的Dream Machine进行了效果对比,我们可以看,Luma动作、镜头更加流畅,幅度更大而且能看出摄像追踪视角在不断切换!!
接下来让我们一起看下LUMA的表现吧~
前情提要
Luma成立于2021年,专注于3D内容生成技术,公司定位于建立多模态人工智能,拓展人类想象力和能力。今年1月,Luma完成了由a16z独家投资的4300万美元B轮融资。此前,Luma在A轮融资中获得了英伟达等知名机构的投资。
Luma推出的Dream Machine基于DiT视频生成架构,能够在120秒内生成一个包含120帧的高质量视频,实现快速创意迭代。它能理解物理交互,确保生成的视频角色和场景具有一致性和物理准确性。
非凡的视频生成能力
下面欣赏Luma生成的视频效果。
逼真的相机运动
Luma的Dream Machine突破了传统视频制作的限制,可以自由变换摄像机视角,实现追踪、环绕和俯视等效果,极大地丰富了创作可能性!
这样会让摄像机运动更加流畅自然,用户可以轻松尝试各种电影化的摄像机移动,制作出更具吸引力的视频。
流畅的动作
在视频制作中,捕捉和保持运动的一致性至关重要,Luma在这方面表现尤为出色。
它能够生成物理上准确的运动效果,无论是人物的行走、物体的移动,还是场景的变换,都能保持高度一致性。这种能力不仅提升了视频的真实性,还增强了观众的沉浸感,让他们感受到视频内容的连贯性和逼真度。
图片转视频
Luma的Dream Machine能够将静态图片转化为生动的故事片段,不仅能够赋予静态图像生命,还能将其转化为连贯的故事情节。无论是将一张风景照变为一段动态的自然纪录片,还是将人物肖像变为充满情感的短片,Luma Dream Machine都能实现。
创造现实中不存在的画面
Luma能够创造现实中不存在的画面,将想象中的场景转化为逼真的视觉效果。无论是幻想中的奇幻世界,未来的科技城市,还是梦境般的奇妙景象,Dream Machine都能将其栩栩如生地呈现出来。
角色与场景的一致性
Luma还能够深入了解人、动物和物体如何与物理世界互动,确保生成的视频角色和场景具有高度的一致性和物理准确性:
Luma的Dream Machine还有一个核心优势是他速度和质量上的双杀。
在视频制作中,快速生成意味着节约成本和即时实现创意,而高质量则是提升观众体验的关键。虽然现在服务器被刷爆了奶茶很难准确的告诉我们生成一个视频需要多久,但是官方说的是大概120秒内可以完成生成!
而且,每个人都可以获得30次免费生成额度!
体验链接:https://lumalabs.ai/dream-machine
尽管Luma的Dream Machine在视频生成方面表现出色,但它仍然存在一些限制。
例如,在形态转换和运动捕捉方面,仍需进一步优化和改进。不过,Luma Labs的团队在官方上表明自己已经意识到这些挑战的存在,会持续努力解决的!
Luma已开放试用
随着官宣可试用,关于Luma的讨论热度达到了空前的高度!可见,开放试用对产品推广是多么重要的一步!
这让我想起了 Sora,尽管奶茶很早就申请试用,但始终未能获得机会。
相比之下,全网的用户都在积极参与Luma的试用,并生成了许多精彩的作品,这些作品充分展示了 Luma 的非凡能力。希望更多的产品能效仿 Luma,开放试用,(说的就是你!Sora)让更多用户体验速速体验到产品独特的魅力!
参考资料
[1]https://x.com/angrytomtweets/status/1801011389831503980?s=46[2]https://xiaohu.ai/p/9549
[3]https://x.com/kodykurth/status/1800979726951174178?s=46
[4]https://x.com/lipeng0820/status/1800954511634096627?s=46
[5]https://weibo.com/1794009892/5044733972057018
微信扫码关注该文公众号作者