Redian新闻
>
自拍变漫画AI大火:可将视频/背景转为漫画风 全程稳定不掉线

自拍变漫画AI大火:可将视频/背景转为漫画风 全程稳定不掉线

娱乐新闻

原标题:一张自拍变6种风格漫画,视频也支持,全程稳定不“掉线”,这个AI不到一天狂揽1800赞。这,就是最近在Reddit上大火的一个自拍变漫画AI,不到一天就收获了1800+赞。

把自拍变漫画:

不止支持一种面部风格:

任凭小姐姐怎么“全身大比划”,效果都能保持稳定,全程“不掉线”:

不止人脸,连全身和背景也都全部照顾到了。

什么来头?

自拍变漫画,人脸、全身、背景都照顾到

这个AI叫WebtoonMe,基于深度学习技术将图像翻译成漫画风格。

熟悉的朋友可能知道,Webtoon,web+cartoon,也就是“网页版漫画”,是漫画的一种呈现形式,出自韩国。

这个自拍变身漫画AI的技术团队也来自韩国。

一开始,他们只做了人脸转换,后来打算把背景也包括进去。

不过问题就来了:照片中的各种物体(如面部、身体部位、衣服、背景等)的风格属性都不太一样,如何输出统一的结果呢?

作者采访了几位webtoon的创作者后了解到,webtoon的“前景”和“背景”是用不同工具制作的,为了让两者更自然地融合,后期也添加了不少修饰。

因此,他们将这个AI分为面部转换和背景转换两部分,即一个背景生成器+一个面部生成器,把人脸裁切出来和背景分别处理。

具体来说,他们先构建了一个webtoon数据集,这个数据集由人脸、身体部位、物体和自然背景等不同部分组成。

然后创建了各种深度学习模型,用来减少前景和背景元素之间的风格差异。

最后又模仿了不同webtoon创作者的修饰技术,通过几种后处理算法,让生成的结果更自然、质量更高。

具体的技术细节我们还未可知,目前也还没有开放试用链接。

不过看起来让很多心动的背后,一些细心的网友仅通过几张示例就发现了一些问题。

眼睛的效果还需改进

就比如这个眼睛,很多网友表示有点恐怖啊,一直直视前方,眼球动也不动。

如果能模仿眼球转动、眨眼睛、眯眼等眼部动作,效果肯定会更好。

此外,抛去这一点,脸部和背景处理得都还不错,就是这个身体部位风格化得不够彻底,还是有点像真人。

倒是这个AI的稳定性值得让人夸赞。

哦,还有一点美中不足,有网友“惋惜”:

要是这个AI还没取名字就好了,不然就可以叫WaifuNet了……[旺柴]

One More Thing

要说这人物变动漫的AI,一直都层出不穷。

就比如前不久的AnimeGAN2,采用神经风格迁移+GAN,由湖北工业大学的三位学生和老师开发,也是大火,一度需要网友排几小时大队才能看一眼自己在动漫里的样子。

AnimeGAN2的风格和今天的这个WebtoonMe不太一样,变换重点也只包括人脸,所以眼部跟踪做的挺好。

不过面对不够高清的人脸时,效果一般。

两者各有所长吧,你喜欢哪一种呢?

戳这里提交新闻线索和高质量文章给我们。
来源: cnbeta
相关阅读
一键实景转动画,清华系初创公司全球首发4D骨骼动画框架,还能生成个性化角色Sora场景转「3D资产」!浙大CAD&CG全重实验室提出文本转3D新SOTA:多功能、可拓展外国妹纸来北京旅游,被当“名人”包围疯狂拍照,她将视频放上网后...外国妹来北京旅游,被当“名人”疯狂拍照,她将视频放上网后...轰动全美!宾州男子斩首其父,并将视频上传到网络|费城亚式按摩店被抢,男子身穿印有"警察"字样的衬衫|警察在执行搜查令时遭到枪击宾州男子弑父斩首还将视频上传网络; 费城议员呼吁召回起亚和现代汽车; 费城老妇酒醉后大闹航班市值50多亿,最高预亏120亿!11万股民跌停板上凌乱了:卖不掉,根本卖不掉!3死2伤!华人住宅深夜大火:租客疑为救房东 不幸一同葬身火海!《繁花》大火:让普通人改命的 10 句话华人团队构建合成微生物菌群,通过成分和时间分工调节混合糖发酵,可将纤维水解物转化为39.5g/L乙醇“你可以当我妈妈吗?”视频爆火:你没有被骗,可能是还没遇到合适的骗局!“科目三”后,又一爆款视频火遍全网,画风逐渐失控…小冰公司宣布已获大模型备案,结束静默,一系列产品从测试转为正式发布家变废墟竟找到两灯台!以哈战争下活出光明节意义-痛苦转为爱的行动加拿大仍是最佳留学移民国!35.5万留学生成功转为永久居民!CollegeBoard重要通知!这9门AP考试明年将转为机考突发!德桑蒂斯宣布退出总统竞选,转为支持川普美国|德桑蒂斯宣布退出总统竞选,转为支持川普欧洲军火工业转为“战争经济模式”,这将是一个划时代的转变!突发!这国爆发“史上最严重大火”,上百人死亡!城市被大火吞没!澳洲也遭热浪席卷,华人千万小心!
原创公众号
羡慕了!列治文年轻华裔男子幸运中了649金球奖!$5800万加元!房地产佣金大变革, 对你有什么影响?加州流浪汉潜入按摩店,强奸女顾客,逃跑时被活捉...加州亚裔男子自家车道上绑架下落不明,蒙面歹徒被抓拒不供认...好消息!安省家庭成本降低从汽油开始:福特将碳税减免延长至 2024 年底!开业在即!密西沙加Heartland大型互动游戏厅要来了~警方:皮尔区五起凶杀和枪击住宅案彼此关联金马早退,分手被骂"坏情人":曾以为阮经天很难翻红,看过《周处除三害》才知道他的能耐春暖花开季,赏花正当时!揭秘家门口的那些达拉斯蓝帽花打卡圣地!离大谱!多伦多考虑开征"下雨税"!事关所有房主!华人网友集体怒喷:穷疯了!注意!加拿大常见的连锁炸鸡店官宣:将重新开始对鸡使用抗生素!好消息!福特将宣布汽车保险新规!大降保费!安省延长这项减税!多伦多35岁移民小伙年入$22万,买楼花换大房!立志十年攒$100万!空难惨剧!多伦多一家五口"坠机失事"全部遇难:家住豪宅、3孩读私校!逼疯了!多伦多小哥家门口装一圈铁柱保护"白色法拉利"!硬刚偷车贼!多伦多失控!大批人中招损失惨重:警惕这5类危险信号!加拿大航司被曝狂砍600个航班,涨价50%!官方回应来了!美国小哥和华裔小伙合伙开公司狂欠$35亿!1个被捕入狱,1个上周露面笑得令人火大...反转?吉赛尔被爆婚内出轨,汤姆·布雷迪:为了孩子,我将努力和他成为朋友心塞!这家美国保险巨头发话,加州72,000份保单不给续了!可怕!12种受污染最严重果蔬名单公布,约95%检出农药残留Costco廉价热狗套餐要涨价?首席财务官离职前这样暗示…神仙网站!封面款原价110刀的阿迪,我在这儿$36拿下!蕉下春夏上新$9.9起!又到了入手防晒美服的季节!惠宜教育上海、杭州讲座场场爆满! 最后一站北京,快来报名吧!结婚4次, 逼死码农老公, 她终于被判了...暑假研学 | 住哈佛,游耶鲁,参加科技夏令营!可亲子同行低龄性犯罪!Bellevue柔道馆13岁男孩性侵犯9岁女孩而被捕年底被裁后,终于上岸了!期间某些小厂给的薪资太离谱...新闻速递 | 波士顿警方警告居民警惕绑架勒索诈骗;一场比海利彗星更罕见的蝉爆发即将来临
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。