基于先验知识的人脸超分辨与基于样本扩充的低分辨率人脸识别方法研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:Destory
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着互联网技术和人工智能技术的不断发展,数字图像早已成为人们获取信息的重要载体之一。在不同的场景下,图像数据具有不同的作用。例如,医生可以利用核磁共振图像来对病人的病情进行诊断,警察能够利用监控视频图像来确定犯罪嫌疑人的身份等。图像数据已经成为人们生活当中不可缺少的一部分,而人脸图像更是图像数据当中很重要的一部分。基于深度学习的人脸分析方法已在各种任务(包括人脸对齐,人脸识别等)当中达到了最先进的性能。但是,当人脸图像的分辨率极低时,这些方法的性能急剧退化。人脸图像超分辨率模型的输入仅仅只是其真实高分辨率人脸图像所包含的部分低频部分信息,生成的高分辨人脸图像缺少其高频人脸信息(定义为真实的高分辨率人脸图像和插值的低分辨率人脸图像之间的差异)。但是,通过研究发现,人脸图像本身不管其分辨率的高低,都会具有一定的人脸先验信息,这些信息在重建人脸图像时,对提高人脸图像的分辨率将发挥很大的作用。针对于此,本文提出一种基于先验知识的人脸超分辨率方法。对于真实场景下的人脸识别方法来说,摄像头拍摄的人脸图像的分辨率都是极小的。因为当人脸跟摄像头之间的距离不足够近的情况下,其摄像头拍摄的人脸图像的分辨率是很极小的,其大小是小于16 × 16像素的。更因为大部分摄像头都是在开放环境下,其拍摄的人脸图像具有光照、角度等问题的噪声,所以监控摄像头所拍摄的人图像都是低质量的、低分辨率的。监控视频下拍摄的低分辨率人脸数据集不仅仅需要从监控视频当中进行检测,还需要对图像进行截取和标注,特别难以构成较好的、完善的数据集。针对于此,本文提出基于数据扩充的低分辨率人脸识别方法。本文的主要工作内容和创新点如下:(1)针对当输入图像的分辨率极低的时候,重建的人脸图像缺少其高频信息,且重建效果不好的问题,本文提出了基于先验知识的人脸超分辨率方法。本方法利用人脸属性和人脸关键点等先验知识来增加重建图像的高频信息,提升人脸超分辨率效果。该方法在模型的训练过程当中估计人脸属性和人脸关键点等先验信息,并将该先验信息加入到模型的训练当中。在Celeba数据集上的实验结果表明,本文提出的方法在低分辨率人脸图像的重建过程当中有明显的效果。(2)针对现实环境下低分辨率数据集不足、人脸识别的性能较低的问题,本文提出了基于数据扩充的低分辨率人脸识别方法。首先,该方法利用基于GAN网络的数据增强方法来对于低分辨率人脸图像数据集进行扩充。其次,利用MS-Celeb-1M数据集训练一个高分辨率的人脸识别模型。最后,利用迁移学习将第二阶段训练的人脸识别模型迁移到实际场景中的低分辨率人脸图像当中,增强模型的适用型,提高低分辨率人脸识别方法的性能。在QMUL-SurFace数据集上的实验结果表明,本文提出的方法在低分辨率人脸图像的识别过程当中具有提高识别性能的效果。
其他文献
苯酚是一种重要化工原料和生产中间体,在制药、纺织、陶瓷等生产过程中被广泛应用,但在其生产和应用过程会产生大量含酚废水。苯酚废水严重损害人类的生命健康和生态环境,甚至使自然生态失去原有的平衡。催化湿式氧化法(CWAO)是一种可高效无害化处理苯酚废水且极具发展前景的废水处理技术。但现有催化剂的工作条件苛刻,带来处理设备的高要求。提高催化剂的氧活化和传递能力是研制高效催化氧化催化剂的关键之一。文献调研和
三维虚拟人物化身在诸如虚拟服装展示、三维动画、游戏等应用中是必不可少的组成部分,它是人类在虚拟世界的重要体现,是进行其他活动的主体。对于虚拟人物化身的重建而言,首先要解决的一个问题是如何快速的创建特定的人体模型。传统基于手工建模、3D扫描的方法虽然可以创建特定的人体模型,但是操作过于繁琐,而参数化人体建模降低了操作成本、提高了模型的生成速度和修改速度。其次人物服装的创建也是虚拟化身重建中重要的一个
近年来,光学探测技术快速发展,激光雷达衍生出了多种扫描方式,在多种平台上起到了测距、测速、跟踪等功能。伴随着激光雷达逐渐成为最主要的三维点云数据的获取方式,基于激光雷达点云的多种科研课题逐渐成为了计算机视觉领域的热门课题。其中户外点云语义分割在重建城市三维地图、辅助智能驾驶等方面均有着重要的作用,吸引了广大学者参与研究。本文针对户外点云语义分割和引入跨源迁移的户外点云语义分割进行了深入研究,主要创
目的:探讨超声引导下菱形肌、肋间肌及下后前锯肌(Rhomboid Intercosta and Sub-Serratus,RISS)平面阻滞在肥胖患者单孔胸腔镜肺癌根治术围术期的镇痛效果。方法:选择2018年12月-2019年11月我院胸外科择期行单孔胸腔镜肺癌根治术患者98例,体重指数(Body Mass Index,BMI)28-40kg/m2。采用随机数字表法将所有患者分为2组,每组49例:
人脸识别技术是计算机视觉领域热门话题之一,其广泛用于电子商务、公共安防及智慧城市等领域。真实场景下的人脸图像,易出现非理想光照人脸图像、侧脸图像及表情夸张的人脸图像,导致识别精度的下降。近年来深度学习被广泛应用在图像增强与降噪等领域。为了从非理想光照人脸图像获取到理想光照下人脸图像,从而提升识别精度,本文通过深度学习提出一种非理想光照下的人脸图像增强卷积网络并开发一套人脸识别考勤系统。本文主要工作
纳米团簇是尺寸介于小分子和颗粒之间,由几个到上千个原子通过一定作用力结合而成的相对稳定的聚集体。在一定条件下,团簇分子可以生长成为长程有序的单晶,并且通过X射线单晶衍射法可以确定其精确结构。在本论文中,主要从合成以及结构的基础层面对于硫醇保护的银氢纳米团簇以及炔基保护的金银纳米团簇进行探讨,并对其性质进行测试与表征。本论文的主要研究内容如下:1.发展表征硫醇保护银氢团簇中氢负离子位置的组合方法:以
抗生素污染已经成为全球性关注的环境热点及难点问题。水产养殖是抗生素使用最多的领域之一,造成环境污染并引起生态环境效应、食品安全等问题。本研究选择中国东南沿海典型集约化水产养殖区宁德三沙湾作为研究区域,选取5类48种抗生素作为目标物,研究了三沙湾养殖海域抗生素在不同环境介质中的时空分布特征,同时追踪分析了网箱养殖中大黄鱼在不同生长阶段组织内抗生素的组成与含量变化,探讨了其与环境浓度之间的相互关系,并
和谐校园是和谐社会的重要组成部分,而构建和谐校园的最关键因素在于“人”。大学生的人际关系满意度是其校园学习体验中的重要一环,能够影响到学生的学习质量与学习收获,也是推进我国“立德树人”根本任务的重要元素。因此,对大学生人际关系满意度现状与影响因素的探究,既是构建和谐校园的必然要求,也是完成高校人才培养中心任务的必经之路。本研究基于大学生视角,以满意度作为衡量大学生人际关系的重要评价指标。在研究方法
随着低功耗广域网的普及,LoRa技术凭借低功耗、低成本地实现用户的长距离连接而备受青睐。正是由于它的广覆盖,导致了无线资源分配的公平性问题——如何解决小区边缘用户出现远近效应问题的同时,支持小区内大规模用户的连接。然而现阶段缺乏可行的LoRa网络分析模型,满足低复杂度而又高效的大规模物联网的设计需求,因此解决这一问题是具有挑战性的。为实现大规模用户的公平连接,本论文提出了最大化LoRa网络中用户最
车库环境下的人身、财产安全问题一直是人们关注的重点。车库安全监控系统主要以视频监控为主,可单一的光学图像已无法满足当前的多元需求。因此,数据融合成为了当下的研究热点,但在现有的数据融合研究中,没有一项是专门针对车库安全环境。对于上述的问题和不足,本文基于77GHz毫米波雷达和视觉相机对车库环境下的动态物体检测展开如下研究:第一,本文为77GHz毫米波雷达在车库环境下获取的数据设计了去噪和目标识别算