基于深度学习的图像内容分析与标注

来源 :北京交通大学 | 被引量 : 1次 | 上传用户:lubiaofs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着媒体技术和互联网技术的高速发展,媒体平台日益普及,呈现的图像多种多样,这多种多样的图像数据被用户分享到各种媒体平台及互联网,极具丰富色彩的图像吸引了越来越多的人,自此人类进入了图像大数据时代。如何在大规模的图像中快速有效的找到用户所需的图像数据是一个非常重要并且值得研究的内容。因为当前流行的检索方式是基于文本的检索,所以说图像自动标注便成了文本检索的核心研究内容。为了达到快速检索图像的目的,就须要对图像的内容进行分析,对图像进行全面标注。本文基于当下流行的目标检测算法进行分析优化,提出了基于深度学习的特征重标定方法,该方法减小了模型体积和计算量并且基本不损失精度。并整合Show and Tell模型根据图像自动生成图像描述,将图像基本信息、图像标注关键字、图像描述存储进Elasticsearch,便于对图像进行多维度检索。本文的主要工作内容如下:(1)设计了一种基于Refine Det的基础网络优化方法。由于VGG-16网络具有模型体积大,计算量大等缺点,设计了一种能大幅减少了计算量,减少资源占用的Refine Det方法,本文使用基于强化学习得到的Mnase Net模型代替VGG-16做图像特征提取,精度平稳中略有下降,但是该方法减少了计算量,同时还减少了资源占用。(2)提出了一种基于Refine Det的特征重标定方法。在ARM与ODM引入SENet,该模型在特征通道间建立依赖的关系,通过学习权重w的方式,对通道进行不同重要性的标定,然后按照这个标定的重要性对有用的特征进行提升同时抑制无太多用处的特征,进行特征重标定。通过对网络的进一步优化,计算量虽稍有增加,但相对精度的提升,这个计算量的增加却是可忽略不计的。(3)设计并实现了一个基于图像内容标注的图片管理平台。该平台能够管理海量图片,并实现图片的快速检索。该平台依赖图片内容进行分类,包括图片本身的Exif信息、经过深度学习算法模型自动标注的图片类别信息以及用户手动填写的其他图片信息。同时为了方便检索图片,将上述图片信息和借助Show and Tell模型自动生成的图像描述信息,一并存入Elasticsearch,基于Elasticsearch进行高效、快速的检索。
其他文献
古塔作为一种历史宗教建筑,具有极大的人文艺术欣赏价值和极高的科研价值,是全人类宝贵的历史文化遗产。但是,目前我国现存古塔,大多经历了自然灾害和人为破坏,均存在材料强
目的:观测宫腔镜手术中患者胸腔液体水平(Thoracic Fluid Content,TFC)、血清血管生成素2(Angiopoietin-2,Ang-2)、血清肿瘤坏死因子(Tumour Necrosis Factor,TNF-?)、血流动力学及
众所周知,函数空间上的算子理论是算子理论中的重要组成部分,它不单是与众多数学分支有着千丝万缕的关系,而且与控制论、量子力学等学科领域的联系也尤为紧密.特别是Toeplitz
传统的锂离子电池作为主要的能量载体已经满足不了人类社会的使用的需求,发展安全轻便并且适合大规模使用的储能器件是解决这一问题的重要途径。电极材料决定了储能器件最终性能,是储能器件中最重要的组成部分。本文以改善储能器件的比容量、倍率性能和循环稳定性为目标,以调整电极材料的形貌、表面性质、孔结构、反应位点以及导电性能为出发点,通过水热法等实验手段提升超级电容器和钠离子电池的电化学性能。论文具体工作内容如
面对全球信息浪潮和日趋激烈的市场竞争,许多企业开始引入六西格玛来提高管理能力。近些年越来越多的优秀国内企业开始逐步接触和推广六西格玛管理技术。六西格玛管理方法是
我们定义了指标为1的伪黎曼空间。它是闵可夫斯基空间的自然延伸,伪黎曼空间与黎曼空间有明显的区别,伪黎曼空间的度量矩阵为非退化矩阵,黎曼空间的为正定矩阵。因此伪黎曼空
本文主要是运用Nehari流形方法与椭圆方程理论来研究有界区域上具有凹及临界非线性项的半线性椭圆方程非平凡解的存在性及相关性质.内容主要包括以下几个方面:第一章简要介绍
随着张骞出使西域与丝绸之路的开通,西域诸多特色的艺术源源不断的在中原地区发展传播。传播中最具特色的是西域文化的璀璨明珠乐舞艺术,而乐舞艺术中传播最为广泛的胡旋舞又独显其魅力。本文通过搜集查找文献资料以及壁画文物,先对胡旋舞的表演风格特色进行了分析,在此基础上借鉴了原境研究法中乐舞表演原始情境意象的再现方式(表演环境、表演条件、表演人数),进行综合考量试图寻迹其原始情境,从而进行创作与表演的体验。并
锚杆锚固作为煤矿巷道、边坡、隧道等工程主要的支护手段,可有效控制岩土体变形,但随着工程条件日益复杂,锚杆因受拉、剪协同作用而产生的破断问题愈发突出,给岩土工程的安全稳定带来巨大挑战。目前,拉剪耦合作用下锚杆失效机制与破断判据尚未明确,工程应用层面的锚杆拉剪破断行为数值模拟尚未实现,阻碍了锚固支护理论发展与支护设计优化。本文在此背景下开展以下研究工作,并得到相关结论。(1)锚杆拉剪失效机理与承载特性
我国黄土的分布范围广泛,其多孔性、崩解性、结构性等直接影响着黄土力学性质。近年来,随着我国西部大开发的不断深入,黄土地区的工程数量和规模不断扩大,再加上西北地区处于