论文部分内容阅读
本文主要介绍一个完整的图像拼接流程,并且致力于在视差存在的条件下获得高质量的图像拼接结果。通常,图像拼接包含三个重要的步骤:图像配准、图像对齐与光束法平差、以及图像后处理。 关于图像配准,本文提出了一种带有多重线型描述符的局部特征及其加速匹配算法。先前的方法通过特征点的邻域局部图像块的信息来描述特征点。然而,局部图像块并没有包含准确的方向以及尺度信息。与之相反,线段通常拥有该信息。因此,本文通过连接两两特征点,然后建立线段模型,从而获取线型描述符。由于每个线型描述符连接上了两个特征点,而且同时每个特征点连接上了多个线型描述符,因而最终形成了一个网状拓扑结构。然而该方法带来的一个代价是线型描述符的数量远远多于特征点数量,这对于特征匹配将会十分不利。为了加速匹配过程,本文充分利用了该网状拓扑结构,提出了针对该局部特征的一种独特的加速匹配算法。实验结果表明:在鲁棒性方面,本文提出的带有多重线型描述符的局部特征要优于其他基于点块信息的经典特征。 关于图像对齐与光束法平差,本文提出了基于网格优化的图像对齐算法。基于局部单应性交换的APAP方法能够简洁高效地实现局部对齐,然而却容易产生图像畸变。GSP方法进行了相机运动评估,求解全局相似性变换参数,从而能够很好地保持拼接图像的自然度。本文利用上述两种方法的优势,结合ARAP方法的局部相似性变换,提出了网格优化方法。网格优化不仅具有图像对齐算法的普适性,而且也实现了光束法平羞的功能:同步地将所有原始图像映射到统一坐标系。实验结果表明:与其他经典的图像对齐方法对比,本文提出的图像对齐算法不仅能够精确对齐图像的局部细节,而且很好地保持了图像结构。 在图像后处理阶段,本文提出了基于显著性内容保留的最佳缝合线方法。即便前述的网格优化可以满足小视差图像拼接任务要求,但是仍然应对不了以下两种情况:存在大视差的场景以及存在运动目标的场景。通常,应对上述问题,一个好的解决方案是:在图像后处理阶段,找寻最佳缝合线来切割缝合图像,避免直接对图像重叠区域的不同目标进行融合。然而,一根不好的缝合线将会切割显著性目标,最终导致拼接缝。为了减少类似缝合线的出现,本文利用显著性内容保留去加权缝合线方法中的能量函数。实验结果表明:基于显著性内容保留的最佳缝合线方法在去除大视差物体以及运动目标的同时,能够有效避免切割显著性目标。