Redian新闻
>
全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

公众号新闻

机器之心报道
编辑:张倩
任何人都可以注册一个账号免费尝试,生成自己想要的视频。

这几天,很多人的朋友圈都被 9 块 9 生成的 AI 写真 刷了屏。这些写真来自一个名叫「妙鸭相机」的微信小程序,主打一个低门槛、人人可用,而且效果媲美花大几百在照相馆拍的写真,因此俘获了大批网友。


「妙鸭相机」的走红是生成式 AI 技术逐渐破圈的标志性事件,它用一个非常明确的应用场景向大众展示了这些技术的具体能力。与此同时,国内外其他公司也纷纷发力,把手里的技术封装成一个个人人可用的 AIGC 产品,Runway 前几个月发布的 Gen-1、Gen-2 便是其中之一。

和很多文生图类应用不同,Runway 的 Gen-1、Gen-2 挑战的是一项更有难度的事情 —— 视频编辑和生成。其中,Gen-2 不仅可以像 Gen-1 一样在原视频的基础上编辑出符合用户要求的视频,还可以从头生成视频。但遗憾的是,在最初发布时,Gen-2 只能在有限的候补名单中使用。

Gen-1 视频编辑效果。来源:https://twitter.com/runwayml/status/1681335709850824704

Gen-2 视频生成效果。来源:https://twitter.com/javilopen/status/1683493099450793984

不过,这一限制在今天被彻底打破。刚刚,Runway 宣布,Gen-1 和 Gen-2 已经彻底开放,任何人都可以注册一个账号免费尝试。生成的视频长度为 4 秒,每秒消耗 5 个积分,利用免费额度可以生成二十几个视频。如果免费积分耗尽,付费标准为 0.01 美元 / 积分,也就是生成一个视频需要 0.2 美元。


这一限制的解除让已经发布数月的 Gen-2 再度走红,越来越多的人晒出了自己的试用结果。在欣赏网友的大作之前,我们先看看这个应用能做什么。

刷屏的 Gen-2 到底能做什么?

今年 2 月份,Runway 发布了 Gen-1。它的功能非常丰富,包括风格化、故事版、蒙版、渲染、自定义等等。

风格化可以理解为参考某张图像修改视频风格。比如给出以下原始视频:


再给定一张参考图像:


Gen-1 就能将视频编辑成上述图像的风格:


故事版是一个电影学名词,指在影片的实际拍摄或绘制之前,将剧本的文字描述转换成一格一格叙述故事进展的图画。Gen-1 可以将一个类似故事版的视频转换为具有特定场景的视频。


蒙版(mask)可以理解为修改视频中的指定部分,而其他部分保持不变。比如,给定以下原始视频:


然后向 Gen-1 输入文字指令「白毛上有黑点的狗。」我们就可以得到编辑后的视频。


渲染是指将计算机生成的 3D 场景或特效图像转换成最终影像。比如,给定以下原始视频:


Gen-1 可以生成渲染后的视频:


此外,Gen-1 还支持自定义视频编辑:


今年 3 月份发布的 Gen-2 延续了这些功能,可以将图片或文本提示的构图和风格应用于原视频上。同时,它还新增了文字、图片生成视频功能。也就是说,仅需输入文字、图像或文字加图像的描述,Gen-2 即可在很短的时间内生成相关视频。它是市场上第一个公开可用的文本到视频模型。

比如,我们输入一段纯文字:「午后的阳光透过纽约阁楼的窗户照进来。」Gen-2 会直接「脑补」出视频:


输入一张照片 + 文字「低角度镜头:一个男人走在街上,被他周围酒吧的霓虹灯照亮。」


Gen-2 会返回以下结果:


仅输入一张图像,Gen-2 也可以将其扩展为视频:



目前,Runway 已经开放了网页端的免费体验窗口,相关应用(RunwayML)也已经在苹果的应用商店上线。


官网地址:https://research.runwayml.com/gen2


Gen-2+Midjourney = 无限可能

Gen-2 限制的解除让这款应用在社交媒体再次刷屏,网友纷纷晒出了自己的试用效果:

视频来源:https://twitter.com/dr_cintas/status/1683473643462860808

视频来源:https://twitter.com/LiveBetween2B/status/1682477648533151744

还有不少人尝试将此前大火的文生图模型 Midjourney 与 Gen-2 结合在一起使用,生成效果非常惊艳:


视频来源:https://twitter.com/commonstyle/status/1682874851823058946

如何再结合一些语音合成、编辑软件,直接用来制作电影也不是不可能:

视频来源:https://twitter.com/dr_cintas/status/1683473643462860808

有人已经用这些工具做出了一部虚构电影的预告片(利用 Midjourney 生成的图):

视频来源:https://twitter.com/dr_cintas/status/1683473643462860808

未来,这些工具还有哪些潜力?我们拭目以待。


© THE END 

转载请联系本公众号获得授权

投稿或寻求报道:[email protected]

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
来了!百度文心一言全面开放:所有人免费用人人都是电影「导演」!MSRA联合北大等高校提出:视频、电影、短视频生成模型政府提供6亿美元资金支持,美国重启免费新冠检测亚裔两兄弟被指控200多项重罪|政府宣布重启免费COVID测试计划|富国银行中心对市中心拟建76人队球馆评估报告结果表示怀疑199元入手大牌品质高速吹风机,还有30天免费试用,赶紧冲!移民生活(10)公园里的华裔老人11家AI大模型陆续全面开放,菜鸟上线货架地图,存款利率再下降,传小米自研手机等系统今明两年落地,这就是今天的其他大新闻!新冠病例一直上升,美国重启免费检测Walmart+ 会员福利介绍【免费试用 30 天,07/31 新增:学生半价】《经济学人·商论》全服务邀你免费试用!Hélène Binet:光的哲学家时间、空间可控的视频生成走进现实,阿里大模型新作VideoComposer火了阿里大模型VideoComposer火了!时间、空间可控的视频生成走进现实一份工作5个试用期?试用不能成为“白用”《虞美人 - 柳边蝶》回国之旅,手机失踪了早鸟报|百度文心一言向全社会全面开放;快手电商将逐步开放“0元开店”;茅台与瑞幸将推出联名款咖啡...Runway最强竞争对手来了,一键生成短视频,限时免费开放使用美国重启免费发放“新冠快速检测试剂盒”,25号开始,这里是领取方式;能够检测到最新突变株免费试听|全面掌握Python, SQL等数据分析语言、工具和拓展包,高效斩获心仪offer!CVPR 2023|无需标注数据,「3D理解」进入多模态预训练时代!ULIP系列全面开源,刷新SOTA深夜突发! 李在明所在党国会院内领导层集体辞职; “将逮捕一名日本公民”, 中方回应; 美国重启免费新冠检测丨早报Next.js + Rust 革新全栈开发,Rust没那么难字节版ChatGPT悄悄开放,免费无排队,抖音号手机号直接登假如免费试用!1 瓶=面霜+隔离+粉底!一招美白,年轻10岁冲,实在太火!热情爆棚,每个窗口都在排队,美领馆面签排队到了明年乌媒发布的视频穿帮了、​英国推迟减排计划、美重启免费新冠检测等丨今日天下不该走的人正被逼走,RustConf粗暴撤换主讲人事态升级引发多人出走,根源出在Rust领导小组不愿交权?获英伟达和Accel9000万美金投资,AI视频Synthesia要对标Runway?免费试用!1瓶=面霜+隔离+粉底!夏天这样美白,年轻10岁防火防盗防闺蜜长跑不是“long run”,短跑也不是“short run”!正确的表达是...ICCV 2023 | K400首次90%准确率!UniFormerV2开源:基于ViT的高效视频识别微前沿 | 强可控视频生成;定制化样本检索器;用脑电重建视觉感知;大模型鲁棒性评测
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。