基于多特征融合的图像美学质量评价研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:xuehaocad
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的高速发展和手机等拍照设备的普及,图像数量成指数级增长,用户对图像美学的评价需求也越来越多。图像美学质量评价任务的关键在于建立图像美学判定与其内容表达之间的关联,使计算机能模拟人类审美对图像的进行客观的美学质量评价。图像美学质量评价在人脸识别、目标检测和图像搜索等任务具有实际的应用价值,近些年来吸引了研究者的广泛的关注。总体来说,目前对图像美学质量评价的研究方法大部分通过建立端到端的深度卷积网络模型来自动提取特征进行美学质量评价。但是,用户通常是在理解了图像语义的基础上来进行评估图像的美学质量,即对一幅图像进行美学评价时,用户会首先感知到图像内容,然后再进行评价,因此,图像美学质量评价应该和图像语义联系起来。但现有研究大多数把图像美学质量评价和语义识别两个任务单独进行;另一方面,图像的美学质量评价具有主观性,现有美学质量评价数据集中图像的美学得分一般也是由不同人打分决定,因此,在设计图像美学质量评价网络模型中模拟人的主观评价过程也非常重要。从以上两个角度,本文提出了两种基于多特征融合的图像美学质量评价方法。本文的主要贡献和创新点如下:(1)提出了一种融合语义特征的图像美学质量评价方法。图像美学质量和图像的语义紧密相关,因此图像美学质量评估与语义内容识别两个任务相互关联且共享某些特征,把图像的美学分类和语义识别两个任务关联起来,作为一个整体可以有效提升图像美学质量评价的性能。该方法通过用多任务参数软共享方法来制定学习策略,将美学质量评价和语义内容识别耦合起来,有效地学习任务间的关联关系和各自任务的特征。具体来说,该方法在通道维度学习全局信息,在空间维度学习局部信息,进而在两个维度上进行任务间的特征自适应融合,使每个任务的有效特征得以增强、无效特征得以抑制,最后通过加入自学习参数来保证任务学习过程中的稳定性,最终使两个任务的性能可以互相促进提升。(2)提出了一种基于多特征融合的图像美学质量评价方法。图像美学质量评估和人类的主观认知紧密相关。因此,该方法通过模拟不同用户对同一图像进行美学质量评价的过程,利用多个深度卷积神经网络分类器学习图像美学的不同表示和偏好,从而形成了由多分支特征融合的图像美学评价模型。该方法的模型在学习训练过程中,将不同美学特征提取器学到的特征通过特征融合模块进行交互,即在多个深度卷积神经网络分支之间加入了特征融合机制,从而可以生成更细致且全面的美学特征,更有效地建立图像内容表达与美学判定之间的有效联系,最终实现了图像美学质量评价任务的性能的提升。
其他文献
大气细粒子是大气气溶胶的一部分,由于粒径小以及可为有毒物质提供载体,对环境和人类健康产生很大的影响,而多环芳烃(PAHs)是大气中广泛存在的一类持久性有机污染物,占自然界中致癌物质总量1/3以上,因此准确把握大气细粒子中多环芳烃的污染现状、主要来源,能为有效控制多环芳烃污染,保护人类健康提供科学依据。为了全面地反映南昌市多环芳烃污染现状和主要来源,本研究在南昌市设立了五个采样点,代表交通干线区、工
学位
近年来对全球变化的研究越来越受到关注,全球变化引起的生态效应是学术界的研究热点之一。其中CO2浓度升高对地球生态系统的影响研究开展较早,并取得了一定的成果,但CO2加富对海洋大型藻类和微藻间的相互作用的影响研究较少;另一方面,赤潮的频繁发生使得寻求一种有效的赤潮防治方法愈来愈迫切,而生物防止不失为一种有效的方法。因此,本文选取赤潮异弯藻、东海原甲藻两种在我国国内最常引起赤潮的浮游微藻和孔石莼、扁浒
学位
目的:探讨血浆同型半胱氨酸(Hcy)与阻塞性睡眠呼吸暂停综合征(OSAS)患者左室几何构型的相关性。方法:选取在山大一院呼吸科确诊为OSAS的患者192例,次日晨起抽取静脉血(进行空腹血糖、血脂系列及血浆Hcy水平测定),行心超检查,同时选取30例健康人作对照组。根据左室质量指数(LVMI)和相对室壁厚度(RWT)将OSAS患者按左室几何构型分为四组:正常构型组(N
目的:通过观察隔附子饼灸肾俞、京门穴和口服芬吗通治疗肾阳虚型早发性卵巢功能不全的临床疗效,对比二者对中医症状及血清性激素改善情况,为肾阳虚型早发性卵巢功能不全的临床治疗提供一定的参考。方法:选择66例符合纳入标准的肾阳虚型早发性卵巢功能不全的患者,随机分为试验组和对照组各33例。试验组:采用肾俞(双)、京门(双)隔附子饼灸治疗。灸法介入时间为经间期及经前期(相当于排
《普通高中地理课程标准(2017版)》坚持反映时代要求,提出含区域认知在内的四大核心素养,强调应在教学内容中积极展示经济社会发展的新变化和科技进步的新成果等。地理新闻作为时效性较强的新课程资源,将其应用于区域认知素养的培养,促使学生从地理的视角出发分析区域内的实际问题,符合地理教学改革和发展的趋势。本文以地理新闻这一重要课程资源作为研究对象,探讨其与区域认知素养之间的关联,并提出应用地理新闻培养区
本文以Y公司船舶作业为研究对象,分析了其中存在的问题,运用六西格玛管理方法对发现的问题进行解决和优化。文章采用了文献研究法、调查法和定量分析法,将Y公司船舶作业流程作为研究对象,采用六西格玛DMAIC五阶段模型,深入分析了影响Y公司船舶按期开航的问题,并通过帕累托图统计出导致该问题的主要因素——“卸船作业中拖车等待场桥”、“装船作业中拖车等待场桥”,并对这两个现象进
太赫兹检测器是太赫兹科学与技术领域中的一个重要组成部分,在安检、成像与材料成分鉴别等方面具有重大的应用价值,因此,受到越来越多的关注。在太赫兹波段,为了提高信号的耦合效率,检测器件通常设计为平面天线与传感单元相集成的结构,因此,平面天线的性能决定了检测器的工作频段和检测性能。本文主要围绕太赫兹平面双缝天线及阵列检测器芯片展开研究,为集成天线的太赫兹阵列检测器芯片与读
单位代码|10445学号2019302384分类号G633.91硕士专业学位论文核心素养导向下高中生物学教学习题研究—以人教版必修1《分子与细胞》教材习题为例Research
学位
研究背景和目的:癌症诱发的死亡率逐年攀升,化学药物治疗(化疗)仍然是目前临床治疗多种癌症的主要手段,但化疗药物通常缺乏靶向性,会对正常组织细胞产生一定的毒副作用,并且长期治疗带来的耐药问题也是造成癌症患者死亡的主要原因之一。大量研究表明化疗联合其他治疗方法(如基因、环氧化酶-2(COX-2)抑制或免疫治疗等)具有协同抗癌疗效,能够有效逆转肿瘤耐药。纳米载体系统在靶向
随着人们生活水平的提高,各行各业对于绿色环保都越来越重视。在红色色料领域,目前以CdSe_(1-x)S_x@ZrSiO_4为代表的红色色料,因其呈色鲜艳且具有良好的抗氧化性和分散性而广泛地应用于陶瓷行业中,但因其含有有毒重金属元素Cd,导致其应用受到极大限制。因此,研发一种绿色环保且呈色性能优良的红色色料成为了一项重要课题。γ-Ce_2S_3是目前替代有毒红色颜料的