融合深度特征和美学感知的图像重定向研究

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:lunxyxd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着不同分辨率的显示设备数量的快速增长,图像和显示设备大小的不匹配问题使图像重定向方法成为计算机视觉领域的热点问题。内容感知图像重定向方法的主要目标是改变图像长宽比的同时保护图像中的主体对象,使变形尽可能发生在相对不重要的区域。但对于具有多个主体的图像重定向时会由于显著图的不准确造成主体对象的严重失真。同时,由于目前大多数算法并没有考虑图像重定向后的美学分布,生成的图像的美学结构容易受到破坏。针对上述问题,本文提出一种融合深度特征和美学感知的图像重定向算法,提取适用于图像重定向的深度显著图和多层级注意力融合的美学注意力图,将它们与图像的梯度和直线检测图融合共同指导图像重定向。本文的主要工作和创新如下:提出多特征融合的能量转移重定向算法。针对具有多个显著对象的图像使用相对显著性的分层表示和阶段细化的方法检测图像中的显著区域,通过将置信度分配给不同的显著区域来解决多个显著对象之间的差异。同时,为了保护多个显著对象的内部特征,提出基于能量转移的多操作方法作为重定向操作算子,使具有多个显著对象的目标图像不会发生明显变形,最大程度保留了全局语义。提出基于多层级注意力融合的图像美学感知网络,首先使用预训练的编码器网络提取图像不同细粒度的美学特征。然后通过所设计的注意力模块自适应地融合,以获得美学信息。最后将学习到的美学信息与图像的显著图、梯度和直线特征图融合作为具有美学分布的重要度图,以此来指导多操作的图像重定向算法。在MIT Retarget Me和MSRA数据库对提出的算法进行验证,与主流算法进行对比,在主观选取实验中以32.8%的选取率获得最高票数,客观评分实验中也获得了0.71的最高得分。实验结果表明了本文提出的融合深度特征和美学感知的重要度图能够很好地保护图像重定向中的美学信息,图像重定向结果相较主流方法具有更好的视觉感知效果。
其他文献
车辆重识别是智慧城市领域的一个重要研究方向。通过比对在不同的摄像机下的一个或一组目标车辆图像与候选图库中候选车辆图像来判断目标车辆的身份与行驶轨迹。由于车辆是刚性物体,不同视角获得的目标图像变化较大,使得车辆重识别成为具挑战性的研究课题。针对车辆重识别中拍摄角度不同导致同一目标外观变化较大,或者同一品牌不同车辆外观相似所导致的识别率不高问题,本文提出一个端到端的深度神经网络框架,通过注意力引导并结
学位
合伙企业作为一种人合性极强的商事组织体,通常是由合伙人共同经营、共担风险,且普通合伙人须对合伙企业财产无法清偿的部分承担无限连带责任,故有关合伙企业名称登记、经营、财产处分等重大的事项,事关合伙企业及合伙人的切身利益,自然须经全体合伙人一致同意才可对外决议。而《合伙企业法》的立法主旨本身就是为了规范合伙企业的行为,以达到保护合伙企业、合伙人及其债权人合法权益的目的。《合伙企业法》中就合伙企业组织的
学位
文本情感分析作为自然语言处理(Natural Language Processing,NLP)的重要部分,其过程主要是对文本中出现的情感以及意见进行挖掘、处理和分析。文本情感分析对政府收集民意、企业发展和决策以及个人获取建议都起着重要的作用。微博作为人们发表个人意见的平台,其平台上评论文本中包含的情感信息具有很高的研究价值以及商业价值。因此本文针对微博平台上的评论文本从三个方面入手进行文本情感分析
学位
量子演化算法通过结合演化算法和量子计算的优点来提升优化性能,以实现搜索空间中探索与开发的平衡。传统的量子演化算法主要用于求解单目标优化问题或小规模多目标优化问题。然而,现实工程中存在许多复杂的大规模多目标优化问题,对此,传统的演化算法优化效率较低。因此,本文研究基于量子力学理论的大规模多目标演化算法,并应用其求解两种现实世界的部署优化问题。对于无线传感器网络(Wireless Sensor Net
学位
赖氨酸作为猪饲粮的第一限制性氨基酸,也是构建理想蛋白质模型的关键。赖氨酸能够影响猪的生长性能、养分消化率、机体免疫、肠道健康、体内蛋白质的合成。赖氨酸缺乏或者过量都会对猪各方面产生影响。所以,探究饲粮中赖氨酸添加水平及赖氨酸需要量对猪的生产性能及各项指标的影响极为重要。作者基于国内外近年来对猪赖氨酸相关的研究发现,饲粮赖氨酸水平比推荐量低15%时会诱导炎症。而适量的赖氨酸可增强猪的细胞免疫,进而影
期刊
心脏作为人体循环系统的动力源,是一个集电生理学、动力学、血液流体力学以及神经、生化控制等于一体的复杂的综合系统,是人体中最重要的器官之一。根据世界卫生组织发布的数据显示,心脏病是全球头号死因。深入研究心脏解剖、运动等特性,对于心脏疾病的防治诊断具有非同寻常的意义。在实际的生活中,需要依靠医生在心脏核磁共振图像中进行勾画,勾画出心脏的轮廓。依靠手工勾画分割心脏轮廓是一件十分耗时的工作,同时传统方法在
学位
早产儿视网膜病变是一种发生于早产儿的未成熟视网膜血管的异常增生性疾病,是目前全球婴幼儿致盲的主要原因之一。目前该疾病常用的治疗方式有激光光凝术、玻璃体内注射抗血管内皮生长因子、冷冻疗法、玻璃体切割术等。不同治疗方法对患者屈光状态发展影响有差异。因此,本文旨在对早产儿视网膜病变治疗后患儿的屈光状态研究进展进行综述。
期刊
防范金融风险是国家审计保障经济社会稳定发展的重要抓手,如何协同多元主体治理更加复杂隐蔽的互联网金融风险值得研究。文章对照考察数字时代下的互联网金融风险防范瓶颈与国家审计能力建设,初步推测国家审计具备参与协同治理互联网金融风险的能力。基于金融脆弱性及其监管、国家审计免疫系统、协同治理等理论提出研究假设,并借用解释性案例印证国家审计主动参与协同治理互联网金融风险的合理性、必要性与可行性。国家审计能够综
期刊
报纸
在肺癌早期利用肺结节图像帮助医生完成肺结节的发现和诊断对于病患的病情控制有着非常重大的作用。在实际医学诊断过程中,肺部CT图像数量庞大,导致影像科医生的工作压力巨大,进而出现误诊漏诊问题。利用海量肺部CT数据的肺结节检索通过查找与待诊断结节图像相似的图像来完成辅助诊断给予医生诊断意见为上述问题提供了决策支持。本文基于卷积深度神经网络,针对不同的数据类型检索需求,提出了两种肺结节CT图像检索模型,并
学位