美图公司旗下美图秀秀技术升级 让你穿越时空当主角
“抠图”技术由来已久,从最早的美图秀秀的“点线”抠图到区域抠图再到“一键抠图”。如今,美图秀秀基于美图影像实验室MTlab独家研发的人脸点检测和实例分割等尖端技术,已可以实现自动且极为精准的人像抠图。其能够智能识别背景与人像,即使再复杂的背景也可以进行完整的人像分割,对发梢、饰品、眼镜框等图形也可以有效识别。
日前,美图秀秀推出“我的漫画剧场”功能,用户只需上传一张自拍照,经过精准的抠图和风格化处理,就可以化身二次元的动漫人物,并与美图秀秀内设漫画人物进行剧情互动。
据了解,此次“我的漫画剧场”功能主要通过自动识别抠图的方式,将用户的自拍照进行抠图并进行绘画风格处理,生成水彩、素描、漫画等多种手绘风格,并嵌入已有的漫画场景中,生成属于用户自己的“爱情漫画故事”。男生也可以通过上传自己的自拍进入漫画故事中,与二次元“女神”恋爱互动。
这款拍照玩法本身操作也极为简单,用户可以通过自拍或上传一张照片,选择美化-抠图,就可以看到自己的人像已经被自动识别并完成背景分离,之后选择漫画主题效果和喜欢的漫画剧情,将处理好的手绘风照片移动至合适的位置。如果还想进行更多玩法,可以点击新建-导入图片,选择一张新的照片,点击滤镜-线稿,将新导入的照片放在其他可以替换的位置,就能够完成一组属于自己的有爱又有趣的“定制漫画”。
而在此技术的基础上,该功能还加入了人像线稿技术,让人像处理看起来更为手绘风格化,仿佛真的漫画效果。同时保持人脸特征的可识别度,仿佛画手绘做,尤其是线条笔触更接近艺术家手绘感,而非死板、单一线条。
“即便是非常复杂的衣物和头发区域,也能够通过人像线稿技术打造出完美的手绘线条。”美图影像实验室(MTlab)负责人许清泉介绍道,“为了让生成线稿和用户真实照片更接近,同时保持线条的顺滑,我们设计使用了特殊的损失函数。同时为了让线稿具有手绘艺术风格,而不是死板的线条,我们打造了一个新的网络结构——sketch net。在这两者的结合之下,人像线稿技术诞生了。”
据了解,在人像线稿的基础上,MTlab的工程师和设计师又通力合作,实现了线稿上色算法,经过数月的探讨和多次调试,最终得到了不错的效果,让用户可以瞬间穿越到漫画世界中。