Redian新闻
>
自拍变漫画AI大火:可将视频/背景转为漫画风 全程稳定不掉线

自拍变漫画AI大火:可将视频/背景转为漫画风 全程稳定不掉线

娱乐新闻

原标题:一张自拍变6种风格漫画,视频也支持,全程稳定不“掉线”,这个AI不到一天狂揽1800赞。这,就是最近在Reddit上大火的一个自拍变漫画AI,不到一天就收获了1800+赞。

把自拍变漫画:

不止支持一种面部风格:

任凭小姐姐怎么“全身大比划”,效果都能保持稳定,全程“不掉线”:

不止人脸,连全身和背景也都全部照顾到了。

什么来头?

自拍变漫画,人脸、全身、背景都照顾到

这个AI叫WebtoonMe,基于深度学习技术将图像翻译成漫画风格。

熟悉的朋友可能知道,Webtoon,web+cartoon,也就是“网页版漫画”,是漫画的一种呈现形式,出自韩国。

这个自拍变身漫画AI的技术团队也来自韩国。

一开始,他们只做了人脸转换,后来打算把背景也包括进去。

不过问题就来了:照片中的各种物体(如面部、身体部位、衣服、背景等)的风格属性都不太一样,如何输出统一的结果呢?

作者采访了几位webtoon的创作者后了解到,webtoon的“前景”和“背景”是用不同工具制作的,为了让两者更自然地融合,后期也添加了不少修饰。

因此,他们将这个AI分为面部转换和背景转换两部分,即一个背景生成器+一个面部生成器,把人脸裁切出来和背景分别处理。

具体来说,他们先构建了一个webtoon数据集,这个数据集由人脸、身体部位、物体和自然背景等不同部分组成。

然后创建了各种深度学习模型,用来减少前景和背景元素之间的风格差异。

最后又模仿了不同webtoon创作者的修饰技术,通过几种后处理算法,让生成的结果更自然、质量更高。

具体的技术细节我们还未可知,目前也还没有开放试用链接。

不过看起来让很多心动的背后,一些细心的网友仅通过几张示例就发现了一些问题。

眼睛的效果还需改进

就比如这个眼睛,很多网友表示有点恐怖啊,一直直视前方,眼球动也不动。

如果能模仿眼球转动、眨眼睛、眯眼等眼部动作,效果肯定会更好。

此外,抛去这一点,脸部和背景处理得都还不错,就是这个身体部位风格化得不够彻底,还是有点像真人。

倒是这个AI的稳定性值得让人夸赞。

哦,还有一点美中不足,有网友“惋惜”:

要是这个AI还没取名字就好了,不然就可以叫WaifuNet了……[旺柴]

One More Thing

要说这人物变动漫的AI,一直都层出不穷。

就比如前不久的AnimeGAN2,采用神经风格迁移+GAN,由湖北工业大学的三位学生和老师开发,也是大火,一度需要网友排几小时大队才能看一眼自己在动漫里的样子。

AnimeGAN2的风格和今天的这个WebtoonMe不太一样,变换重点也只包括人脸,所以眼部跟踪做的挺好。

不过面对不够高清的人脸时,效果一般。

两者各有所长吧,你喜欢哪一种呢?

欢迎戳这里提交新闻线索和高质量文章给我们。
新闻来源: cnbeta
相关阅读

原创公众号
生死未卜!华人女博士后离奇失联 本应后一天到美国 7人同时消失 拆楼搜救为骗保险金放火烧车!纽约46岁男开车到外州纵火一个时代的终结:纽约再无$1元pizza买房好时候?!全美房价10年来首下降 2月二手房销量升14.5%黄色网站,全是「女明星」印度公交色狼猖獗,一枚小小的别针,成了众多女性的防身武器….从二本到北大再到哈佛,曾经“县城差生”的我做对了什么?本来以为彻底没戏了的事,硬生生被我搞定了 | 独家定制如何修复原生家庭的创伤?考情最前线 | 2023年各院校432复试名单(人大/南大/武大/大工)考前最前线 | 2023年应用统计调剂院校汇总(新增上海师大/大同大学/新疆大学/青岛理工/湖北工大)风继续吹:纪念张国荣逝世二十周年回顾展突袭同事们的上班包,好精彩!新品预告|| 出游就这样穿吧!好看又舒服10年睡1200个女孩,还拍不雅视频?美籍健身教练自曝约P经历,三观炸裂!苏州杀夫藏尸案,大量细节曝光:哪有什么离奇,不过都是人性!著名作家,被网友怀疑杀子?“ 恕奶奶我直言,你们这代年轻人谈恋爱真的不行! ” 隔辈二人组恋爱观爆笑大探讨!【4月6日-4月8日】嘉宾信息持续更新中!第15届哥伦比亚中国峰会倒计时开始!(哥大商学院和国际与公共事务学院共同主办)太火爆了!为何从世界名校毕业的学霸们都扎堆去了香港?
联系我们隐私协议©2023 redian.news
Redian新闻 · 海外热点 · 尽在指尖
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。