基于真实失真的无参考客观图像质量评价研究

来源 :江西财经大学 | 被引量 : 0次 | 上传用户:yx10110605
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动数字时代的到来,各种社交媒体应用每天都会产生数以亿计的图像内容。数字图像充斥在每个人生活的方方面面,其中,大部分是由业余用户在各种非专业环境下拍摄获得。与专业摄影师拍摄的照片不同,业余用户拍摄的图像通常会因环境因素、硬件设备参数和人员摄影技术等诸多因素造成过曝光或欠曝光、低能见度、运动模糊、失焦、鬼影等失真问题而导致图像质量退化。此外,在图像采集、压缩、传输和存储等过程中,都不可避免地会导致图像质量的下降,造成不理想的视觉体验。高质量图像一方面可以提高观看者的体验质量,另一方面也可以使许多计算机视觉算法从中受益。因此,图像质量是服务提供商向用户提供高质量内容的一个重要的标准,也是基于可见光相机的系统过滤低质量图像以避免决策错误的一个重要指标。由于每时每刻数以百万计的摄像机在产生大量真实图像,社会迫切需要开发一种有效的真实失真图像质量评估模型用以帮助控制和提高真实图像的感知质量。近年来,基于真实失真的图像质量评价研究已有一些进展。但与人工生成的合成失真不同,导致真实失真的因素十分复杂,产生的真实失真类型也非常多样,因此,准确地评价真实失真图像的感知质量是极其困难的。如何精准且高效地评价真实失真图像的感知质量,获得与人类主观意见相一致的预测结果是图像质量评价领域亟待研究的重要课题。在业余用户日常拍摄的图像中,曝光、色调、对比度失真和运动模糊是最常见的几类真实失真类型,这些失真对人类视觉系统(Human Visual System,HVS)产生的最直观的刺激就是色彩和纹理信息的刺激。此外,深度学习方法由于其强大的图像表征能力而在众多视觉任务中取得了优异的性能,然而,现有的用于解决真实失真图像质量评价问题的深度学习方法大多是在全局尺度上提取图像高级语义特征,而忽略了真实失真图像中普遍存在的局部失真问题,并且也未能有效利用低级图像特征对真实失真的影响。本篇文章致力于通过融合多种对真实失真敏感的视觉特征来解决真实失真图像质量评价问题。本文的研究内容主要包含如下两个方面:(1)本论文提出了一种基于色彩与纹理特征的真实失真图像质量评价模型。首先,将给定失真图像从RGB色彩空间映射到HSV色彩空间,这一操作可以将色调、饱和度及亮度等色彩信息进行分离,从而使所提取的色彩特征更加准确,有效。对于每个色彩通道,该模型提取了前三维色彩矩作为图像的色彩特征。其次,该方法根据对数Gabor滤波器的实值响应通过阈值将图像划分为了4层,每层对应着图像中纹理特性不同的区域,并在每层分别计算其局部归一化亮度系数。此后,本文使用广义高斯分布和非对称广义高斯分布对每层中局部归一化亮度系数的分布在不同尺度上进行拟合,并将两种分布的拟合参数构造为图像的纹理特征。然后,将色彩特征与纹理特征进行融合,构成了49维图像特征。最后,使用了一个支持向量机回归器来学习从图像特征到最终感知质量分数的映射关系。第2章中在两个公开的真实失真图像数据库CID2013(Camera Image Database)和BID(realistic-Blur Image Database)上对所提出的模型与9种先进的通用无参考图像质量评价方法进行了性能比较,实验结果显示,该模型在两个数据库上均取得了更好的性能。同时,实验结果也证明了融合色彩特征和纹理特征对评价真实失真感知质量具有重要影响。(2)本论文提出了一种基于多任务卷积神经网络的真实失真图像质量评价模型。该模型将质量评价任务分解为了三个子任务,即图像属性预测子任务、图像场景分类子任务和图像质量评价子任务。图像属性预测子任务基于给定的输入图像,根据输入图像的浅层特征预测图像的5种图像属性,即亮度、色彩、对比度、噪声和清晰度。图像场景分类子任务将给定的输入图像分类到9种预先定义的场景类别中,即动物、植物、室内场景、城市街景、人类、夜景、风景、静态物体和其他。而图像质量评价子任务则负责在融合图像高级语义特征和图像场景分类子任务及图像属性预测子任务的输出后,预测给定图像的感知质量分数。该方法对三个子任务进行了预训练和端到端的联合优化,同时融合了图像属性预测结果、图像场景分类结果和图像的低级与高级特征、全局与局部特征,以此对给定真实失真图像的感知质量进行预测。本文中将所提出的模型与10种先进的无参考图像质量评价算法在SPAQ(Smartphone Photography Attribute and Quality)数据库上进行了对比,所提出的模型取得了显著的优势,与人类主观评分具有较好的一致性。同时,为验证所提出的各个模块的有效性,在第3章中进行了大量的消融实验。
其他文献
随着适应高比例新能源接入新型电力系统加快构建,系统对储能等灵活调节电源的需要愈发迫切。作为目前技术最成熟、应用最为广泛、寿命周期最长、容量最大的一种储能技术,抽水蓄能进入了发展的快车道。文中介绍了抽水蓄能的基本原理和发展现状,总结了抽水蓄能最新发展趋势;分析了四川电源特性和存在的问题,以及抽水蓄能在四川电网的应用前景,并提出了适合四川电网实际的抽水蓄能的应用场景和模式。
期刊
锚垫板是预应力张拉施工过程中的重要构件之一,在后张法的施工过程中,预应力筋的张拉力通过锚垫板传递给混凝土,因此,锚垫板的安全性很大程度上决定了锚下混凝土的承载能力。当前市面上锚垫板的生产方式主要为铸造,由于铸铁锚垫板脆性较大并且重量大,搬运及施工过程中容易产生应力集中,造成锚垫板破损,而且由于铸造件在生产过程中容易产生气孔、夹渣等问题,这些问题都会对锚垫板的安全性埋下隐患,进而影响张拉的结果。为了
学位
舒伯特作为浪漫主义音乐的典型代表人物之一,他所创作的钢琴小品充满了浪漫主义音乐的气息,特别是1827年创作的即兴曲Op.90,这部作品篇幅短小、结构严谨、旋律优美、情感丰富细腻,将浪漫主义的风格特点呈现地淋漓尽致。本文以舒伯特钢琴即兴曲Op.90为例,首先梳理作曲家生平以及作品的创作背景;其次从和声、曲式、调式等方面对音乐要素进行分析;第三分析作品中的浪漫主义风格特点;最后结合自身的演奏经验,对作
学位
智能网联汽车已成为汽车产业发展方向,但目前在大规模应用上还面临着严峻的问题。单车感知、计算能力的局限性以及多车之间行为存在难以协调的潜在冲突和博弈是两大关键问题,智能网联汽车云控系统是突破这些局限的有力方法。本文讨论了在云控系统架构下计算任务的工作逻辑,总结了云控系统关键需求以及计算任务的数学建模方式,并建立了云控系统计算调度优化方法,同时开展了云控系统原型的开发和应用。具体地,对于计算调度优化问
学位
在中国的基层治理体系中,社区是实现基层自治、法治、德治的重要载体和基本单元,具有举足轻重的作用。近十年来,我国城市化进程不断加快,为了腾挪更多的土地资源用于城市发展,一些地区的地方政府有计划地将地理位置邻近的农村进行撤并,形成新的城市社区。2019年,温州启动村社规模优化调整,经过调整,温州市罗西社区正式成立,该社区由原温州龙湾区及瓯海区14个村撤并而成。该社区居民大多为瓯海区户籍,但因社区地理位
学位
论文针对微表处路面行车噪声大、强度低、“掉粒”现象严重等问题,基于废胶粉改性路面降噪原理及水性环氧树脂高粘结力等特性,提出水性环氧乳化沥青(WEA)降噪磨耗层技术。优选强氧化活化、微波活化两种方式进行废胶粉活化处理;以水性环氧乳化沥青为胶结料,活化废胶粉为降噪功能性填料,制备活化废胶粉干法改性水性环氧乳化沥青降噪磨耗层,并探索其施工性能、路用性能、耐久性及降噪性能。首先,以接触角为废胶粉活化效果评
学位
目的:雄黄(Realgar)为一味常用中药,最早见于《神农本草经》,《中国药典》中指出雄黄具有清热解毒,镇惊开窍等功效,近年来,由于不合理(即过量、长期)服用单味雄黄及其复方制剂引起的不良反应或慢性砷中毒事件时有报道,使其入药的安全性问题成为人们关注的焦点。雄黄中的砷是一种有毒类金属,为世界公认的人类I类致癌物。脑是砷的毒作用靶器官之一,雄黄中砷可以破坏血脑屏障进入脑中并蓄积,长期暴露可导致智力发
学位
北戴河是举世闻名的旅游度假胜地。由于其滨海旅游城市的特点,旅游人口在暑期期间聚集性暴增,超出城市承载能力,城市基础设施满足不了需求,旅游城市的市场经营行为不规范,城市公共服务出现不均衡问题,人员暴增导致一定资源浪费和环境污染问题,等等。这些季节性发生的城市病的出现一方面是由于历史、地理环境等原因所导致,另一方面则是北戴河区现行城市建设与管理体制创新不足,技术设备更新配套不及时等原因所导致。IBM公
学位
近年来,自然灾害频发,其对电力系统的正常运行造成了不可忽略的影响,尤其是台风、冰雪灾、持续高温及雷电对电网的影响最为严重。以我国常见的台风灾害为例,位于台风移动路径及其影响范围上的地区,往往会出现大规模倒塔和导线断线等事故,甚至导致区域内大面积停电,带来巨大的损失。配电网作为电力系统的重要组成部分和直接面向用户的关键一环,亟需建立能够预防、抵御极端灾害并快速恢复关键负荷的配电网,即弹性配电网。本文
学位
蒙阴位于山东省中南部地区,地处多个方言片区的交错地带,方言情况较为复杂。依据《中国语言地图集》的说法,蒙阴方言属于冀鲁官话,同时根据钱曾怡先生的观点,蒙阴方言属于东区的东潍片。本文以蒙阴方言称谓语为研究对象,将其分为亲属称谓语与社会称谓语,研究了蒙阴方言称谓语系统外在面貌与内在特点。全文共分为四个部分,内容如下:绪论部分首先通过称谓语的研究价值与蒙阴方言称谓语研究的缺乏性两方面阐明研究缘起,指出研
学位