Redian新闻
>
程序员们,快把这款AI“魔法”做到手机相机里,求求了

程序员们,快把这款AI“魔法”做到手机相机里,求求了

科技
鱼羊 发自 凹非寺
量子位 | 公众号 QbitAI

这位胖友,你听说过“镜头恐惧”吗?

包括但不限于,总是尽力躲避镜头,即使拍照也往往表情尴尬,笑不出来。

那感觉,就是人家拍照是回眸一笑百媚生:

我一上相就是“我是谁”、“我在哪”、“我在干什么”灵魂三连。

现在各种算法技术这么发达,就不能我往镜头前一站,相机自动帮我微笑到位吗???

真别说,本老镜头恐惧症患者仔细查了查,发现这事儿还挺靠谱。

比如前面这张阮玲玉露齿而笑的照片,原片其实长这样:

嘴角这么一扬,老照片里的清冷美女,是不是就多了一些鲜活的妩媚温柔?

再看林徽因和她的表姐妹们,微笑加持,少女的天真本性就仿佛透过照片穿越了时代。

关键是,AI这一手微笑P图,着实是P得行云流水不着痕迹。

不仅嘴角上扬,连带苹果肌的变化也刻画到位,细节拉满。

此刻的我只想说:

妈妈再也不用担心我拍照不会笑

不过说实话,从技术的角度来看,虽然现在的各种AI“P图”大法百花齐放,真要自己手动实现一个,麻烦事儿属实不少。

以这个“一键微笑”为例,别看只是一个微笑的动作,背后涉及的算法环节就包括:

  • 人脸检测

  • 面部关键点识别

  • 面部属性识别

  • 目标表情驱动

……

而具体到细节,关键的一步,就是要把人脸图像分割成高度精细的语义块,使得图像与像素级语义分割相匹配。

只有经过类似这样的操作,才能让表情编辑与人脸本身的状态相贴合,达到真实自然的效果。

还有一重难点在于数据集

一键微笑背后的算法模型最终效果好不好,很大程度上依赖于人脸数据集的构建。

数据集中包含的人脸越多越丰富,AI算法就能学到越多的人脸特征,提高输出结果的精准度。但人脸数据集的获取又往往涉及到用户隐私等多种问题,较难采集。

但桥豆麻袋,我也不是在为难各位攻城狮,因为这事儿啊,也不是没有现成的捷径可以走。

开头的这么一套AI“魔法”,其实就是我最近了解到的华为HMS Core提供的AI“一键微笑”功能。

所谓HMS Core,官方说法是华为终端云服务(HUAWEI Mobile Services)开放能力合集。

简单翻译一下,就是一个给移动端开发者们提供各种App基础应用服务,以及图形、媒体、AI等一系列算法能力的平台。

其中媒体领域的视频编辑服务(Video Editor Kit)提供了专属滤镜、AI着色、人物追踪等多种AI能力。而一键微笑能力正是来自于此Kit能力。

对于开发者们而言,这便意味着,不用费力调教模型,仅需几行代码,简单接入华为HMS Core开放的SDK,就能低门槛地复制同款AI“微笑魔法”。

可以看到,基于面部识别算法以及数据集的优化,与FaceApp等相比,Video Editor Kit的微笑处理偏合理含蓄,微笑自然且不会改变原本人脸的合理结构。

HMS Core研发团队依托自研的人脸生成模型,结合算法利用部分真实人脸图片,生成大量的虚拟人脸图片来训练微笑模型,比如可以基于数千张具有肖像权的人脸图片,生成百万张虚拟人脸数据集。然后再利用自研算法模型,从人脸数据集中生成了“开心数据对”,也就是一系列的笑脸。最终,从中选出更符合原图人脸面部状态、更自然合理的微笑。

Video Editor Kit的“一键微笑”功能近期会在华为开发者联盟官网上线,有兴趣的小伙伴可以尝试下~

除了赋予照片中人自然微笑的能力,Video Editor Kit在处理老照片时,还展示了另一重AI能力:AI着色。

与此前火爆外网、成为老照片修复界标杆的MyHeritage相比,来自华为的AI着色风格强调的不是“复古感”,而是更贴近真实生活。

左为华为Video Editor Kit,右为MyHeritage

据了解,Video Editor Kit的AI着色是通过设计轻量算法模型、构建百万数据集,和优化调整训练方式,来让照片着色更自然。

另外,相对而言,Video Editor Kit的AI着色赋予老照片的色彩饱和度更低一些,更便于后期处理。

复杂算法一个SDK就搞定,应用开发超简单

这里咱们就以AI着色为例,看看在自己App中集成HMS Core的AI能力,需要经过哪些步骤。

首先,你需要在华为开发者联盟网站上完成实名注册。

第二步就到了集成HMS Core视频编辑服务(Video Editor Kit)的视频编辑原子能力SDK。该SDK不仅提供导入、编辑、渲染、导出、媒体资源管理等一站式视频编辑能力,还涵盖了多个AI算法能力接口,可根据业务场景灵活选择。

在快速集成SDK之后,只需要增加几行代码就可以调用AI着色能力,轻松实现图片和视频处理的AI智能化:

除了详细的开发指南之外,HMS Core官网还提供了Codelabs、服务教程和开发实例,帮助开发者快速集成SDK,进一步降低了应用开发的门槛。

需要说明的是,视频编辑服务(Video Editor Kit)的SDK不仅支持华为手机,也支持非华为设备,具体版本要求如下。

另外小小地提醒一下:人脸算法千万条,安全守法第一条。大胆的想法,还是收一收吧~

降低开发门槛的“基座”

看到这里,你是否有些跃跃欲试了呢?

简单接入SDK即可获得复杂的AI算法能力,对于App的开发者们而言,技术层面的顾虑减少了,自然可以投入更多的精力和时间去丰富创意。

而对于咱们吃瓜群众来说,这也就意味着,你能在HMS Core里找到的开放能力,都能在各种App里,以各种好玩的创意形式直接体验到。

实际上,无论是安卓还是iOS,各自生态内类似的“基座”,如今都已是大势所趋。

谷歌的GMS Core也好,苹果面向开发者的各种Kit也罢,都已证明其在各自生态内,推动中小应用开发者创意落地的价值所在。

而这种应用的繁荣,反过来也进一步为安卓、为iOS获得了更多用户的好评、吸引了更多优秀的开发者。

作为全球Top 3移动应用生态的HMS,同样在这条“基建”之路上探索已久:

在去年HMS Core 6正式发布之时,华为官方的数据就显示,其开放能力已覆盖应用服务、图形、媒体、智能终端、人工智能、安全、连接与通信在内的7个领域,总共70个Kit能力。

截至2022年Q1,HMS生态中的开发者数量,已经超过540万。

可以说,华为搭起了台子让移动应用开发者来唱戏,相当于是在移动应用生态里构建起了一套全新独立的基础设施。

并且不仅面向HarmonyOS,HMS Core也支持安卓和iOS的应用和服务开发。同时也在平板、智慧屏、智能手表及车机等更多智能终端上布局。

更重要的一点是,作为手机软件能力之基,HMS被推至台前,或许也可以看作是华为将多年积累的创新能力宝藏分享给了全球的应用开发者。

你觉得呢?

「人工智能」、「智能汽车」微信社群邀你加入!

欢迎关注人工智能、智能汽车的小伙伴们加入我们,与AI从业者交流、切磋,不错过最新行业发展&技术进展。

ps.加好友请务必备注您的姓名-公司-职位哦~


点这里👇关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见~


微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
再说中国人的崇洋社区纠纷不断:程序员何苦为难程序员美国风情小镇盘点|第一弹闪亮来袭,快把小本本都掏出来南大学子卖相机,6年做到全球第一,或成A股首位90后创始人最适合程序员的 10 款 Linux 发行版 | Linux 中国当被大模型输入技术内功,数字人「文画两开花」,还在手机里随时陪你聊天硬核观察 #655 智能手机将在三年内扼杀单反相机惊曝!周杰伦助理竟在澳街头强看路人手机相册!只因其疑偷拍Jay!路人这么说...这届申请者求求了,活成人间清醒的大反派吧,别死磕梦校了用了这款手机,我再也不敢说折叠屏是伪需求了【庭院种菜】迷你西红柿,你迷我迷万人迷!程序员郭宇,28岁退休之后手机与相机跨界合作热潮背后,谁能打好这场“联名之战”?第一位程序员是一位女士以魔法对抗魔法:支持和反对堕胎权的人们开打科技大战一位老海归在美国受迫害的经过这名“业余”程序员,曾用50张1080Ti对抗癌症。2个抖音工程师搞出新工具,意外风靡字节内部,项目经理用上安静多了,程序员不骗程序员我打赌你手机里也有一张这种照片🤫马上抽查!谁的手机里没有成都绝美晚霞照?我们找这家“0星级酒店”要求了解释和说法十八线演员们,拍出了今年最好的武侠片六年团队Leader实战秘诀|程序员最重要的八种软技能「社恐」也想贴贴,一款频繁出现在热恋情侣手机里的 App 火了当一个程序员去做HR,造轮子是首要任务你手机里没这张照片,我不信选美13年,16岁突然自杀!“住在手机里”的当红美少女到底怎么了?!英文歌译奥斯卡最佳影片 CODA主题曲: 两面 - Both Sides NowGithub 有份程序员们做的菜谱,终于没有了该死的“适量”将作家变为程序员:如何做更快速、更可持续的剧情研发?经济不好,有人建议对程序员征收重税,100万收80万的税,分配给穷人!求求你们,千万别复婚美国“凡尔赛女王”:程序员变顶级贵妇,装修18年山寨皇宫差点变成烂尾房…今日聚焦:他,他们,拼命救人!平凡的他们,平凡的我们,点赞并坚守!台東二層坪水橋
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。