基于人眼视觉特性的虚拟视点立体视频质量评价研究

来源 :宁波大学 | 被引量 : 0次 | 上传用户:yining0209
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自由视点视频(Free Viewpoint Video,FVV)能够让用户从多个不同的视角感受立体感,增加用户在观看视频时的沉浸感,是在三维视频基础上的进一步发展。在FVV系统中,基于深度图的绘制(Depth Image Based Rendering,DIBR)技术占据着重要的位置。在编码端传输少量的参考视点信息,在解码端通过DIBR技术可以得到多个虚拟视点,从而达到减少传输数据量的目的。然而,DIBR技术仍不成熟,绘制得到的虚拟视点视频图像存在多种失真,严重地影响了用户观影体验。当用户在FVV系统中观看立体视频时,左右视点存在多种组合方式,不同的组合方式给用户带来不同的视觉感知。探究虚拟视点立体视频的客观质量,能够有效指导视频编码,并作为反馈优化绘制过程,从而完善FVV系统。虚拟视点视频由多帧合成视点图像组成,合成视点立体图像质量评价研究是虚拟视点立体视频质量评价研究的基础。因此,本论文首先对合成视点立体图像质量评价进行了研究;然后,从人眼视觉特性出发,对虚拟视点立体视频质量评价进行了深入的研究。(1)针对合成视点立体图像的质量评价问题,提出一种多特征融合的方法。结合合成视点图像失真特点和双目感知特性,该方法融合了合成视点立体图像中失真区域、失真边缘和奇异值三种特征。首先,利用视差和阈值得到符合人眼感知的失真区域,计算该区域的平均结构相似度(Mean Structure Similarity,MSSIM);然后,提取合成视点边缘图像中符合人眼感知的失真边缘,计算在该区域的MSSIM值;接着,计算原始图像与失真图像奇异值差异;最后,将上述特征值进行融合得到最终的客观质量分数。在合成视点立体图像库上对本文算法和对比算法进行测试,实验结果表明,本文算法的Pearson线性相关系数(Pearson Linear Correlation Coefficient,PLCC)和 Spearman 秩相关系数(Spearman Rank Order Correlation Coefficient,SROCC)分别为0.865和0.862。与现有客观质量评价方法相比,能更准确地反应合成视点立体图像质量。(2)针对虚拟视点立体视频左右视点非对称分布问题,提出一种无参考虚拟视点立体视频质量评价方法。结合虚拟视点立体视频非对称失真特点和用户的人眼视觉特性,该方法利用局部和全局两部分特征来表征虚拟视点立体视频的质量。首先,提取三种尺度下视频时域和空域形态学边缘图,并计算其水平方向和垂直方向标准差特征;然后,提取三种尺度下视频的时域和空域自然场景统计特征;最后,考虑左右视点非对称失真分布,将左右视点特征按照在剪切波子带中的信息量合成立体视点特征,并利用随机森林预测得到最终的客观质量分数。在非对称虚拟视点立体视频数据库上对本文算法和对比算法进行测试,本文算法的PLCC、SROCC、Kendall秩相关系数和均方误差分别为0.908、0.867、0.699和5.806。与现有客观质量评价算法相比,本文算法结果更加符合人眼主观感知。
其他文献
在人类文明的历史河流中,朗诵艺术是在人类语言基础上逐渐发展出来的一种有声语言的表达形式。人们借助朗诵,宣传思想,传播信息,也借助朗诵抒发内心丰富的情感。从古至今,无论是文言文还是白话文,有声语言的情感表达,都是我国人民对朗诵艺术发展不断实践的过程。新中国成立以来,随着各门类艺术的发展,朗诵艺术作为有声语言的艺术的代表形式不断活跃于各个舞台,发挥着它独特的艺术魅力。在古代,朗诵艺术传播的媒介是人的嘴
随着经济的发展与城市化进程加快,许多人的出行首选工具变成了机动车。机动车的数量不断增加,带来了道路拥堵、事故频发的问题。公安部门利用信息化技术对拥堵路段进行管理,投入大量资金在公路上安装大量视频监控设备,建立视频监控中心。但是监控方法主要是人工监控,耗费人力且效率低下。同时,近几年在卷积神经网路研究领域,许多优质的目标检测算法问世。YOLO算法是2015年提出的快速目标检测算法,相比其他目标检测算
学位
学位
聚酯材料因具有优异的理化性能和机械性能作为重要的聚合物材料被广泛应用于纺织服装、包装、绳网、织带、电子器件和汽车等领域。除了纺织服装用PET可通过熔融缩聚直接制备之外,其余用途的PET材料通常需要实施进一步的增黏反应,工业上普遍采用固相缩聚法来制取高特性黏度的聚对苯二甲酸乙二醇酯(PET)。由于固相缩聚反应温度在熔点以下,PET链增长速率较慢,且反应工艺流程长,设备投资成本高。相比于传统的固相缩聚
对于痕量有机物分析,固相萃取(SPE)、固相微萃取(SPME)是目前最主流的两种样品前处理技术。聚酰亚胺(PI)是一种广泛应用的特种功能聚合物,其具有耐高温、耐化学试剂、良好机械强度和绝缘性等优点,广泛应用于航天、燃料电池、电子、军事等许多领域。在本论文中,首先制备了具有不同结构的PI多孔萃取材料,在分别应用于环境水样品、调味品以及食品中的有机污染及药物残留的定量检测。第一章为绪论部分,对萃取基本
当前,我国基层治理工作进入多元主体、协商共治、多方参与的新阶段。青年是社会治理的重要参与者,其所具备丰富的活力、想象力、创新力,将会助力城市基层治理的发展。论文以成都市为例,围绕促进青年参与城市社区治理展开研究。首先,论文从国家政策、群体特征以及青年角色缺失的角度介绍了研究背景,并从理论与实践的角度阐述本文的意义。并系统性梳理了国内外有关社区治理、居民参与和青年参与的研究成果,探寻了青年参与研究成
石墨烯具有超高比表面积、低密度、高稳定性和优良可加工性等特点,被视为最理想的制备“轻、薄”型微波吸附材料之一。然而纯石墨烯因为电导过高导致高反射低损耗,并不能直接用作吸波材料,常用的解决办法是与低介电型高分子化合物及磁损型磁性纳米粒子复合,但这无疑会使吸波材料变得厚重,从而无法实际应用到国防安全及航天航空中吸波隐身及杂电流干扰消除。如何改变石墨烯的结构和性质实现单一轻薄材料高吸波特性是目前研究的瓶
在中国近代法律发展的历史上,关于司法体制的建立曾有过一元司法体制与二元司法体制的激烈争论。而在民国北京政府时期,我国最终确立了二元司法体制,并在此基础之上建立了平政院作为专门的行政诉讼审判机关。平政院的设立对于中国近现代司法体系的建立发挥着举足轻重的作用。尽管平政院设立的时期正处于时局混乱的民国时期,政局动荡不安以及法律条文的繁冗复杂都给平政院工作的开展造成了一定的困难。但是我们不可否认的是,平政
学位