基于深度学习的视觉显著性研究

来源 :深圳大学 | 被引量 : 0次 | 上传用户:hot8391
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
日常生活中,人们面对大量的外界信息,而这些信息中,视觉信息所包含的信息量最为庞大。面对海量视觉刺激,人眼拥有特有的注意力机制来筛选重要或者让人感兴趣的内容,这些内容区域被称为显著性区域,而与此相关的研究被称为视觉显著性研究。视觉显著性研究在媒体处理任务中能够快速提取重要的区域,将有限的计算资源分配给人们所关注的位置。这在图像视频压缩,目标跟踪,质量评价,异常监控等应用领域有重要的研究意义。本文对已有的图像和视频模型进行了细致的分析和调研,针对视频和高动态范围图像的显著性检测方法进行研究。研究工作主要包括如下三点:1)在高动态范围图像的研究中,本文首先对高动态范围图像的成像技术进行了研究,再结合现有优秀的低动态范围图像显著性模型的优点,设计了针对高动态范围图像的显著性检测框架。该框架通过多曝光分解的方式,将已有的静态图像模型扩展到高动态图像模型中。同时本文建立了现有方法的性能基准线,对已有静态模型以及高动态显著性的性能进行了细致的比较。在两个公开高动态范围图像眼动数据集上的实验结果表明,本文提出的方法较已有的高动态范围图像模型具有更好的性能。2)为了对提出的视频模型和现有其他方法进行比较,本文搭建了眼动数据收集平台,组织实验收集了视频眼动数据集。相比较现有的视频数据集,我们选择的视频源均为无损的高清视频,避免了由于视频压缩过程中产生的失真对人眼关注点产生干扰。另外在场景的选取上更加丰富,包含了更多更具挑战性的运动场景。3)本文以现有的动态视频模型的相关研究工作为基础,提出了一种基于三维卷积网络的视频显著性检测模型。该模型接受一段单独的视频片段作为输入,相较现有的显著性模型提高了处理效率。在现有公开数据集以及本文提出的视频眼动数据集上进行了充分的比较试验,结果表明本文的模型在处理效率以及预测精度上均有优秀表现。
其他文献
页岩水力压裂过程中需要将大量的水压入地下。监测页岩开发中压裂液随时间变化的注入、返排和滞留吸收等信息对于页岩气可持续大规模安全开采具有重要意义。压裂液与周围地层
步入21世纪,一方面,欠驱动船舶(Underactuated Surface Vessels,USV)路径跟踪控制因非完整系统理论体系的亦趋完善而受到越来越多学者的关注和研究;另一方面,为贴合现实船舶
随着人类航天活动的日益增多,大量失效报废的航天器成为空间碎片,高速的空间碎片严重威胁航天器的在轨安全。空间碎片根据尺寸分为大碎片、小碎片和危险碎片。目前,主要通过
心肌组织工程核心是在体外进行扩增和培养种子细胞,并结合具备可降解、良好生物相容性的三维支架材料,形成细胞-生物材料复合体。原位构建“心肌贴片”是将种子细胞、生物支
由于具有优异的光学、力学特性,尖晶石光学零件在航天航空领域具有宽广的应用前景。作为一种多相硬脆材料,尖晶石具有显微硬度不一致的特性,采用柔性介质加工时,材料去除效率
微弧氧化是金属表面在高温下与自由氧发生反应的过程;反应过程中需要不断消耗自由氧。因此作为反应物电解液中的自由氧的含量对微弧氧化的反应速度、膜的形成及特征具有重要
科协会员管理系统是用来对会员进行统一管理的信息系统。该系统旨在拓宽学会发展会员的途径,根据分类对不同的会员开展针对性的帮助和关怀,真正提高会员忠诚度,不断增强协会
随着高速列车、航天、航海和机械,建筑,行业的快,速发展,工业发展对薄,壁、宽厚比大、多,孔、异形、复杂的空心铝,型,材的需求逐渐,增高。在挤压过程中,经常使挤,出制品出现
随着核工业及核技术的迅猛发展,含铀放射性废水总量越来越多并且成分复杂。如何廉价高效处理这些含铀废水,成为世界主要涉核国家和地区急需解决的一大难题。吸附法以其经济快
机器人的发展为人们的日常生活和工业生产提供了极大的便利。机械手作为机器人常用的末端执行器,一直是机器人领域的研究重点之一。近年来软体机器人相关研究的发展带动了软