Redian新闻
>
让图片变动态视频,现在可能动动鼠标就够了。

让图片变动态视频,现在可能动动鼠标就够了。

科技



随手用鼠标一涂,图片里的东西就跟着动起来。


这种堪称马良神笔的操作,真实地在我们的生活中发生了。。。


而这一切,都是通过一家名叫 Runway 的视频制作网站完成的。


如果有熟悉这家公司的朋友就会知道,他家之前还给电影《 瞬息全宇宙 》做过特效。


今年年初,他们也靠着文生视频的功能,在 AI 圈打出了名声。


而这次更新, Runway 则又推出了一个名叫 Motion Brush ( 运动画笔 )的 “ 王炸 ” 功能,只要涂一涂,图片秒变视频,算是刷新了世超对于 AI 生成视频工具的认知。


从 Demo 的效果来看,跟耗资上百万美刀的动画制作相比,虽然不能说一模一样,但也有个七八分像了。


反正我看完,是再一次被 AI 的进化速度给震惊到了,照这么发展下去,以后拍电影拍动画哪还用得着人啊?


但 Demo ,往往都要比咱们上手试出来的效果要好很多。


所以,为了看看这个运动画笔到底咋回事儿,还是老样子,世超先替你们测评一波。


从官网打开 Gen-2 ,页面是这样儿的。


不过,生成视频并不全是免费的,在开始之前官方会弹出一个说明,一共 525 个积分, 1s 算 5 个积分,按照一个视频 4s 来算,咱们能白嫖到 26 个。


接下来,咱们像这样先上传一张照片,或者也可以用图片 + 文字描述结合的方法。


下面,就有一个 “ Motion Brush ” 的 BETA 版按钮。


点进去,左上角可以调整画笔和橡皮擦的大小,下面的三个参数值分别代表向左向右、向上向下以及离镜头的距离远近。


这里可能得注意一下,不是只要用画笔涂了就万事大吉,参数的调整也同样很重要。


不然,你可能会得到一个像这样奇奇怪怪的视频。。。

一开始的失败作品


像这张图,我想要呈现出来的是银杏叶子随风飘落的画面,用画笔把一些叶子涂抹之后,再把吹落的方向往左下方调一调。


参数调完,点击生成等个 1 分钟差不多就好了。


看看这效果,我只想说:妈妈,我要去拍电影!


说真的,我觉得这次 Runway 的更新有点过于强悍了。。。


包括头发还有海浪,效果也都不错,重点在于,整个过程操作下来不过 2-3 分钟,新手完全无压力。


如果想调整相机的角度,运动画笔旁边还有个 Camera Motion ,可以控制镜头的移动、变焦等等,就跟拍电影似的。


比如这个视频,我设置相机的镜头往右移,生成出来的东西我叫它《 梵高爆改贝克汉姆 》


虽然生成出来的东西,似乎已经跟梵高没啥关系了,但从面部轮廓、光线的变化来看,效果还是不错的。


还有这个老马烤肉,很多细节上看着很奇怪,但到这为止,其实都还算是正常的。


但是用着用着,我发现 Gen-2 的生成主打的就是一个看心情。


这张经典的 meme 图,大伙儿应该都眼熟吧?


我本来是打算借着 Gen-2 给这位老哥来一个 “ 华丽 ” 的转身,但没想到,全都乱了套了。


衬衫小伙儿变 POLO 衫大叔、女人的白眼、女朋友当街变装,要素太多,甚至不知道该从哪里开始吐槽。。。


接着,我又用另外一张蜘蛛侠的图片试了试,这次想要的效果是蜘蛛侠在空中飞起来。


为了防止出岔子,我还多加了一句文字描述。


结果,还是翻车了。


移动效果是有的,只不过这个蜘蛛侠后面已经完全变形了。


而且翻车的还不止这一个,像这张图生成出来的东西,更是重量级。


想象中:海浪拍打着沙滩,海风吹着女孩的头发和裙子,女孩转身往另一边。


现实里:鬼啊!!


这 AI ,是直接把人当烟给飘走了。。。


试用下来,我觉着这个运动画笔在处理一些简单的自然风景上还是不赖的,但图片要素一多,就容易在细节上出问题


从一个刚刚上手的新人角度来说,想要把 Gen-2 调教好可能还需要一些门槛。


世超在这里给个小建议,如果想要生成视频的效果不那么离谱,除了用画笔涂、调整参数以外,最好还是用文字再描述一遍。


还有大伙儿应该也能看出来, Gen-2 生成出来的视频速度是很慢的,流畅度也没那么丝滑。


总的来说,好坏参半吧。


不过,从年初开始,像 Gen-2 这类的 AI 生成视频工具,其实已经进化得很快了。


今年 8 月,有位老哥还用 Runway 手搓出了一部《 流浪地球 3 》的预告片。


包括 Stability AI ,最近也发布了开源 AI 视频模型 Stable Video Diffusion 。


咱们看待技术发展的眼光,或许可以宽容些。


毕竟, AI 绘画刚出来的时候,在生成结果的稳定性、可控性还有细节描述能力上,也闹过不少笑话。


从文生视频到图生视频,从单一模态到多模态,现在的 AI 生成视频有点在爆发前夜的感觉。


去年差不多也是这个时候, Stable Diffusion 、 Midjourney 等一众 AI 绘画工具爆火,都说人间一天, AI 一年,明年说不定就轮到视频了。


撰文:西西 编辑:江江&面线 封面:焕妍


图片、资料来源

Runway 


微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
剑桥市市议员竞选人许正翰博士:“我唯一的目标就是让剑桥从长远来看变得更好”【租房】Brighton两室公寓出租,现在可以入住,出门即是地铁,近BC|无忧精选公寓楼[模型] 我的鼠标我做主之我打印了一个鼠标AI新风口,图片秒变视频,离谱!【租房】Brighton近BC/医院的一室公寓出租,现在可以入住,优质房东|无忧精选公寓楼卡航 Avios 里程现在可以网上兑换 JetBlue 航班了!【悲伤,昨天没来得及发就贬值了……】稍微动动,肩膀响!膝盖响!髋关节响!是不是要废了???主人一周不见爱犬特意打视频,结果它却爱理不理:看够了没加拿大警方警告不要自行发布包裹窃贼图片视频,涉侵犯隐私!DNA无处不在。现在可以轻松采集了 | 新知苏格兰布莱尔城堡(Blair Castle),白墙黑瓦又一美国大学宣布!只要高中成绩达标就「自动录取」!初探纽约网红博物馆加拿大警方警告不要自行发布包裹窃贼图片视频,涉侵犯隐私!网友们吵翻华人亲历!加拿大卡地亚惨遭“0元购”!劫匪动动手,抢出温西10套房!谁说这玩意非要去北京排队才能买?动动手趁着双十一比平常划算太多!大盘点!2024年5月CFA考试安排、考纲变动、考试费用变动...赵丽颖突然官宣喜讯!全网炸了:10年了图片图片图片我们公开吧……地方动态丨合肥市庆祝欧美同学会成立110周年图片展举办谷歌Gemini被曝视频造假!多模态视频竟是剪辑配音,击败GPT-4靠「作弊」?8岁娃的牙齿能有多难看?看到图片震惊了!这一点比蛀牙还要毁颜值,现在改善还来得及小蜘蛛,光彩一幕劝你现在穿秋衣秋裤的理由,一个就够了!(派我方妈妈六十大闯关!七十太不易!BC省房东现在可以涨房租了!具体涨幅这样算!千万别大意!AI是否能灭绝人类:让图灵三巨头决裂的百万问题舌控“鼠标”火爆CES!能打字能剪视频,网友:哪能买到,急[惊喜]每月5个G免费流量,超值好礼动动手就送!攻略全在这儿了…忒轻松了!原来在国内动动手指,就买到美国巨多的折扣好物,值了!每天1000美元 现在可以租一辆特斯拉CybertruckWFH reduced work-related carbon emissions by 54%, Nature千万人围观「烧焦婴儿」图片!伯克利教授辟谣:AI图片检测器无用【吵翻】加拿大警方警告不要自行发布包裹窃贼图片视频,涉侵犯隐私!新加坡华侨银行客户现在可以在美国、日本、韩国等地使用Alipay+ 了(附使用方法)NGINX 模块现在可以用 Rust 编写了
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。