论文部分内容阅读
图像拼接以及视频拼接技术被广泛应用于全景地图、临床诊断、视频监控、虚拟现实等众多领域中。满足单点透视假设下的图像拼接已取得了显著性进展,但由于图像获取过程中难以达到单点透视假设的要求,或获取动态视频时摄像头之间存在抖动以及位姿差异,造成图像之间视差过大,使得产生清晰、自然的拼接结果变得困难。相比于图像而言,视频内容更丰富,可以给人带来更好的视觉体验,视频可以看作是由时间上连续的多帧图像组成,因此,视频拼接以图像拼接为基础。对于动态视频拼接而言,若仅仅使用图像拼接技术将视频对应帧图像拼接在一起,会导致拼接结果中存在抖动现象,因此,为了获得稳定的视频拼接结果,还需要考虑视频稳像问题。针对大视差场景下图像拼接容易出现模糊、重影的问题,研究缝合线主导的图像拼接方法,提出基于多平面多感知缝合线的大视差图像拼接算法。首先,为解决大视差场景下存在多个对应平面的问题,基于多平面产生对齐候选单应性矩阵,每个单应性矩阵能实现图像中平面的一对一对齐;同时,考虑人眼对图像颜色、边缘以及显著度的多感知特性,提出基于多感知缝合线的图像融合方法生成拼接缝合线,以此缝合线为拼接边界将图像拼接在一起,拼接结果看起来更自然、无缝。针对动态视频拼接时,难以同时获得既稳定又无缝的拼接结果的问题,提出基于语义分割的动态视频拼接算法,采用稳像和拼接同时进行的方法,获得稳定且无缝的大视野拼接视频。与此同时,为了获得更稳定、更精准的视频拼接结果,提出基于语义分割的背景信息提取算法,根据背景处的时间特征匹配点估计相机运动路径,排除了运动前景的干扰,达到更平滑的视频稳像效果;根据背景处的空间特征匹配点计算图像变换模型,实现背景处的无缝拼接,然后使用多感知缝合线融合算法,在背景区域找到一条缝合线,沿缝合线将图像拼接在一起,提高了视差存在情况下视频对应帧图像的拼接精度。该论文有图40幅,表3个,参考文献71篇。