三维重建中的影像检索方法研究

来源 :中国测绘科学研究院 | 被引量 : 3次 | 上传用户:liuye1111111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大规模三维重建是数字摄影测量和计算机视觉领域的核心问题之一,通过一组具有重叠度的影像来恢复相机拍摄瞬间的位置,并获取场景的三维信息。其中如何在大规模的影像数据中快速准确地获得具有重叠区域的影像,又是三维重建中的关键问题。传统的空中三角测量过程中,必须获取相机的标定参数和规则的航带信息来获取影像之间的相似信息。而在计算机视觉领域,通常利用基于内容的图像检索方法(Content-Based Image Retrieval,CBIR)来获取相似影像,此方法不需要图像之外的任何信息,而且处理过程中检索速度快、人工干预少、自动化程度较高。针对当前手机数据、数码相机数据、互联网数据以及无法或很难获取航带信息的无人机影像和航空影像时,采用基于内容的图像检索方法可以准确、高效的检索出同名影像。因此,有必要研究如何利用计算机视觉中的方法来解决数字摄影测量中大规模三维重建的影像检索问题。基于内容的图像检索方法的基本思想是通过提取图像中的视觉特征来表示图像,然后对大量的视觉特征建立索引,从而快速、准确的检索出相似的视觉特征,最终获得具有相同或相似内容的图像。因此CBIR的主要工作集中在视觉特征的提取以及海量特征的索引构建,其中视觉特征提取主要围绕图像的纹理、色彩、形状和空间几何关系等来展开的,而索引结构主要有树型索引结构和基于哈希的索引结构。在大规模的图像检索背景下,如何快速准确的对数据量庞大、向量维度较高的特征数据进行相似检索成为当前CBIR研究工作中的热点与难点。基于以上内容,本文研究内容包括:1.系统性的总结了基于内容的图像检索方法的基础理论和算法原理,归纳出了基于内容的图像检索方法的流程,并概括了三维重建中影像检索的两大关键问题:一是面对内容丰富的摄影测量影像数据,如何提取出能够准确表达其视觉内容的特征描述子,并对影像的尺度缩放、旋转、平移以及光照等变化保持一定的不变性;二是如何对提取出的海量、高维特征描述子建立索引结构,从而快速准确的获取相似特征,对描述子数据进行分析,不同的索引结构将导致不同的检索结果。2.本文深入研究了SIFT、SURF两种特征算子的原理和实现细节,初步介绍了基于深度学习的LIFT特征算子,分析了三种特征提取算法的优缺点,通过大量试验对比了三种算子在不同影像视觉信息下的稳定性和鲁棒性。其中SIFT特征提取速度较慢,但鲁棒性较高,SURF算子是SIFT算子的改进算法,其提取速度较快,针对部分类型的影像其鲁棒性较高,LIFT算子为最近提出的基于深度学习的特征提取算子,其具有很大的上升空间,是未来研究的一个大方向。3.详细分析并实现了随机KD树、随机投影树、词汇树三种索引结构,其中随机KD树通过建立随机森林来加速海量数据的检索速度,随机投影树通过利用一定的策略,对高维数据进行降维来避免高维数据所引起的“维度灾难”,而词汇树通过建立视觉单词对海量数据建立索引关系,大大加速了数据检索的速度及精度,文中详细比较了三种算法的性能和对海量数据进行检索的性能。4.通过将检索算法和特征提取算法进行结合,快速、准确地实现了大规模三维重建中的影像检索过程:利用SIFT和SURF算法分别对影像进行特征提取,对获得的海量特征描述子构建树型索引结构,然后输入待检索影像的特征算子,在树型结构中检索其相似描述子,最后通过一定的策略反馈到影像上,从而获得和待检索影像具有重叠区域的影像,结果验证了该方法的准确性和实用性。针对不同的树型索引结构,通过改进传统的数据相似度量策略,在一定程度上提高了检索的鲁棒性和精确性。
其他文献
随着网络技术的不断发展,互联网已经成了人们生活中不可或缺的一部分,网络用户的数量和网络链路中的数据量呈现出爆发式增长的势头,各种与网络数据相关的需求也在不断增加。
高光谱偏振成像技术(Hyper-spectral polarization imaging),主要是利用多个光谱通道对目标进行光谱分析、偏振分析与图像分析,可以实现对被测目标的特定波长进行成像,更有利于
近年来,离子束技术在各种材料表面纳米结构的形成和精确控制方面显示了其独特性和有效性,这方面的研究对材料表面改性的实际应用有非常重要的意义。本文分为两部分,一部分是
本论文主要研究了多元碱(土)金属硒、碲化物的合成,晶体结构及相关的性质。以硒、碲化物为主要研究方向,采用高温固相的方法合成了二十余种新型化合物:第一类是Rb2AX3Se8(A=Mn、
可持续能源的利用和推广是解决当前我们所面临的能源消费需求不断增加、能源消费结构不合理的问题,及其带来的能源压力及环境污染问题的必要途径,而太阳能凭借其总量大及可开
早侏罗世亚洲、欧洲气候温暖湿润,真蕨类、楔叶类,裸子植物都较繁盛。早侏罗世晚期世界范围内的海平面上升及缺氧事件对古生物面貌带来了一定的改变。古植物的研究显示相对于
吉尔吉斯斯坦作为我国“一带一路”战略建设中的重要环节,吉国的安全形势尤其是非传统安全不仅对于吉国本身的发展有着重要作用,更是对我国的“丝绸之路经济带”战略在吉国和在整个中亚地区的推进有着至关重要的作用。苏联解体后,吉尔吉斯斯坦走上了独立发展的道路。独立之后的吉尔吉斯斯坦由于历史和现实因素,更加重视政治和军事方面的传统安全,在很大程度上推动了国家的政治稳定和经济发展。随着国内经济社会的不断发展和国际
地表凝结天气包括露、霜和雨凇等多种,其中露是植物生长的重要水资源,霜冻会造成一定的农业灾害甚至是植物死亡,地表凝结天气的监测与识别对预测极端天气、保护农作物收成和
在建筑行业的不断发展和进步的当代,大范围的旧建筑物已经达到或接近服役年限,更有许多建筑在施工中并未达到规范要求。建筑物的加固与补强已经成为这些建筑的必然所需,建筑
输电线路、发电和配电系统所构成的电力网络是典型的复杂网络。研究表明,电力网络中,输电线路比节点更为关键。复杂网络理论的发展和完善为电力系统的分析提供了新的方式方法,基于复杂网络理论,电力系统可以被抽象为图的形式以识别关键链路。本文将电力系统抽象为加权网络,并在此基础上提出了一种新的介数指标来识别关键链路。在加权网络中,通过将输电线路的电抗作为边的权重来计算电力网络的脆弱性,进而识别关键链路。无损传