论文部分内容阅读
随着移动互联网的飞速发展,手机作为使用最广泛的移动信息终端,在移动互联网中占有非常重要的地位。目前,直播作为一种新兴的社交模式,正以迅雷不及掩耳之势在国内外蹿红,移动直播已经成为人们娱乐的一个重要途径。在直播软件中最基本的功能之一就是人脸美颜,但是目前大多数直播软件提供的美颜功能还是不能满足用户的要求,因此视频美颜技术还有很大的发展空间和改进空间。本文实现了一种视频虚拟美颜方法:首先使用一种基于卷积神经网络(Convolutional Neural Networks,CNN)分别进行人脸检测和五官对齐,然后根据人脸位置和五官位置,利用图像融合和平滑技术实现人脸美颜。本文所做工作如下:(1)分析现有的人脸对齐、单人像化妆、视频虚拟化妆等相关技术,为视频虚拟美颜系统或框架提供了技术基础和相应的解决方法。本文主要研究了一些具有代表性的人脸对齐、美化方法,其中人脸对齐主要是基于回归和优化的方法,美妆方面主要是关于人脸几何形状、肤色美化、以及妆容的美化。(2)在人脸对齐方面,本文运用一些图像处理、计算机视觉方面的前沿理论和方法,对一些代表性的人脸对齐模型进行梳理和深入研究。根据对现有方法进行总结,本文应用了一种高实时性和高精度的人脸对齐算法。该算法是基于MDM的深度学习框架来实现人脸五官点的对齐,随着人脸的转动,五官点也做出相应的变化。(3)在虚拟美颜方面,根据检测到的皮肤区域和人脸五官对齐位置,本文实现了基于融合的虚拟美妆,把卡通装饰图片融合到头部和眼部等对应区域;同时使用基于图像平滑的方法实现人脸皮肤的美化,使得肤色更加自然和美观。视频虚拟美颜在学术领域有很大的研究价值,同时在现实生活中拥有非常多的应用场景。因此,本文的视频虚拟美颜的实现具有很大的实用价值。