论文部分内容阅读
视觉是人类感知外部世界最重要的途径，人类生活各个层级的需求都要依赖视觉感知来提供服务。长期以来，计算机视觉领域的研究人员都试图复现甚至超越人类视觉系统，而视觉识别是其中最具挑战性的视觉任务之一。视觉识别不仅需要克服各种环境因素的干扰而准确理解图像中的基本视觉要素，还要结合各种先验知识来理解视觉要素具有的深层语义。视觉识别对许多科学问题和工程问题的解决具有关键的作用。经过多年的发展，视觉识别技术研究取得了一系列重要成果，并获得了广泛地应用;但与人类视觉系统相比，在通用性、泛化性、实时性方面还有较大差距。 近几年，随着图像获取、传递、分享方式的多元化和普及化，人们生活的方方面面都充斥着大量的图像和视频，广泛的应用需求对视觉识别技术提出了更高的要求。与此同时，随着实验手段和分析方法的逐步提升，生物学家对生物认知机制有了新的发现和解释，这为视觉认知功能的建模提供了新的思路。在这种背景下，本论文基于神经认知科学、神经生理学和心理物理学的研究成果，从生物机制启发的角度研究了视觉识别模型和算法，具体从框架模型设计、具体算法设计、算法性能提升这三个层次展开了研究，主要贡献包括: (1)针对HMAX(hierarchical max-pooling)模型中匹配模板提取和使用方式造成的编码效率不高、编码特征不具有遮挡鲁棒性的问题，受相关生物证据启发，提出了一种通用视觉认知模型。其模拟了初级视皮层(V1)到前下颞叶皮质(AIT)的功能，并引入了广义记忆三阶段、初始认知、主动调控和神经元集群编码等机制。模型的编码阶段改进了HMAX模型，通过两级编码提升了其编码效率和特征辨识能力。模型的回想阶段提出了基于相似概率融合的识别框架，其结合先验信息以概率融合的方式实现多特征融合。不同类型视觉识别任务上的验证实验证明了该模型的有效性和通用性，尤其是遮挡情况下鲁棒的识别性能反映了该模型对人类视觉认知过程有着更加深入的理解和模拟。 (2)针对上面通用视觉认知模型在用于人脸感知时不能有效整合该感知过程特殊性的问题，加入面部“感知-记忆”机制，提出了人脸感知双通路计算模型。该模型由三个感知功能部分组成:面部结构感知部分使用级联卷积神经网络来估计面部关键部件的中心位置;面部表情感知部分提出了一种新颖的人脸表情识别方法，利用卷积深度置信网络的自学习能力来同步完成特征学习和特征选择;面部身份感知部分在基于相似概率融合的识别框架下加入了表情调控步骤和主动学习功能。实验结果证明了该模型对于不同表情下的人脸识别具有较好的鲁棒性，尤其是与基于深度学习方法的对比结果显示，该模型具有相当的性能和使用便捷的优势，适合于处理小样本的人脸识别问题。 (3)针对空间增强局部二值模式直方图算法没有考虑表情因素影响的问题，借鉴上面人脸感知双通路模型框架对其进行了改进，提出了引入表情因素的改进空间增强局部二值模式直方图算法，提升了原始算法在不同表情下身份识别的性能。此外，针对上面人脸表情识别方法使用的卷积深度置信网络学习能力有限的问题，利用了深度卷积网络中间层具有提取基本特征的能力，提出了一种更加简洁的表情识别方法，其不需要大量样本来学习如何提取表情特征。实验结果证明了这两个方法改进的有效性。 (4)针对以上三个模型和算法没有考虑复杂背景干扰的问题，提出了基于显著值回归的视觉显著物体检测模型，作为预处理步骤来滤除背景干扰从而提升以上模型和算法在真实环境下的使用效果。该模型通过单流全卷积神经网络来实现全图显著值回归，从而完成显著物体检测。针对网络结构特点，专门设计了平滑、鲁棒的损失函数，从整幅显著图和显著物体区域即全局和局部这两个角度来同时引导网络收敛。该模型是一个真正意义上的端到端网络，网络之外没有任何额外的预处理和后处理步骤，不仅提升了其感知能力，也极大地简化了检测过程。与多个近期顶尖性能模型相比，该模型拥有较少的参数数量，可以达到相当或者更好的检测精度，同时在处理速度上有较大提升。 本论文有效地结合了相关生物认知机制和信息计算模型，提出的模型可以为视觉认知任务的结构化建模提供新的思路和参考依据，提出的算法可作为基本单元用于实现更复杂的深层认知模型或用于构建机器人视觉系统。