实时视频拼接技术研究与系统实现

来源 :东南大学 | 被引量 : 0次 | 上传用户:kllkll123456
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频拼接技术是一种利用多个小视场视频构建大视场视频的技术。视频拼接技术是图像拼接技术的延伸,但不同于图像拼接。随着信息科学与计算机技术的发展,视频拼接技术也得到了越来越广泛的应用。本文首先介绍了视频拼接的基本流程,主要包括视频帧解码,帧预处理,帧配准对齐和视频帧图像融合。随后介绍了视频拼接过程中所涉及的主要技术,主要包括摄像机成像模型,广角和鱼眼镜头畸变矫正算法,图像球柱面映射和双线性插值等。随后,针对视频配准对齐问题,本文介绍了两类常见的配准算法。其中包括直接像素配准算法和基于特征点匹配的配准算法,并比较了两类配准算法的适用范围和优缺点。对于多路视频流配准的情况,为解决由配准误差累积而引起的鬼影和模糊,本文介绍了对摄像机参数进行全局优化的光束平差方法。对输入视频视差严重的情况,本文介绍了一种基于单应变换场的参数化运动模型估计方法。最后,对多目摄像机系统视频配准的特定情况,本文提出了一种结合直接像素配准和SURF特征点配准并基于光束平差方法对所有摄像机的参数进行全局优化的方法,解决了由缺少特征点而导致配准失败的问题,并将局部配准误差均摊到所有摄像机位置参数中,消除了多目摄像机拼接中出现的鬼影和间隙。对于视频融合问题,本文介绍了图像融合领域经典的几种静态图像融合算法,探讨了在视频帧融合过程中相较于静态图像融合所涉及的新问题。对视频帧中由运动物体所产生的接缝,和模糊等问题,本文提出了一种基于缝合线更新和卷积金字塔的视频融合算法,该算法在最佳缝合线融合的基础上加入了缝合线更新策略和卷积金字塔无缝融合的思想,能够避免运动物体穿过缝合线并减轻甚至消除融合结果图像中的接缝和模糊效应。在较高的计算效率的前提下,生成视觉效果良好的融合结果图像。最后,本文提出了一种基于多目摄像机的视频拼接系统设计与实现方案。该系统使用流水线架构以最大化CPU利用率,针对流水线中不同级流水间处理速率不同进而导致的同步问题,本文提出了一种运用互斥锁和条件变量同步的缓冲队列的设计,该设计在保证计算效率的基础上维护了流水线架构下数据的正确性。针对高分辨率输入图像CPU计算资源不足的情况,本文提出了一种使用GPU基于数据并行对帧处理算法进行加速的实现方法;在卷积金字塔实现过程中,本文提出了一种使用GPU共享内存的实现方法,充分地利用了GPU的运算和存储资源,提高了视频拼接的计算效率。基于上述系统,本文进行了五路3840*2160超清视频实时拼接实验,实验的结果符合预期。
其他文献
互联网的发展逐渐影响着传统企业,传统企业为了导入流量或内容需要依赖外部合作伙伴的能力。目前,API服务提供者如何进行API开放,企业管理者如何对开放出去的API进行管控都是API能力开放面临的痛点。通过API网关,可以将企业内部的服务能力以标准规范化的API接口形式开放出去,合作伙伴从而能够共享服务和数据,构建企业共赢生态。针对市场对API网关的需求,瞄准在融合云中服务能力开放的应用场景,本文提出
互联网开放环境和大数据资源的开放使用需要明确定义数据各方的权益、义务,从而构成数据拥有者、数据使用者以及相关利益第三方的博弈关系。网络关系管理主要围绕资产交易中建立的租赁、委托、转包等网络关系在开放的互联网环境下进行可信的认证和记录,达到关系的不可篡改、可追溯的要求。通过区块链的链状数据模型和不可篡改、可溯源等特点,使得网络关系的产生和发展过程能够在开放环境中得到可信的记录和证明,再利用区块链的智
按照我国公安部交通管理局最新发布的数据显示,至2019年6月我国的机动车保有量高达到2.5亿辆,这意味着每1000名中国人就有170辆机动车。加之我国的人口基数大,经济发展潜力大,未来的汽车保有量还会继续呈上升趋势。伴随着移动通信网络的全面发展,网联汽车对我国汽车行业、交通行业的发展起着尤为重要的作用。汽车,作为个人或者组织的移动装置,等同于一台移动终端,这是移动信息技术必须解决并满足的网络区域,
随着计算机视觉等技术的发展,对监控视频智能处理和分析成为城市安防中重要发展方向。监控视频中异常检测作为智能监控中重要组成部分,发挥着越来越重要的作用。监控视频异常检测分为异常片段检测和异常视频帧检测两种,虽然传统的异常检测算法能够检测出监控视频中的异常情况,但是其仍然存在着以下问题:(1)在检测异常视频片段过程中,传统算法中视频前期处理较复杂,模型无法适用变化的场景,导致模型检测精度低。(2)在检
近年来,云化是整个IT行业的主旋律,以云原生、微服务为特征的云化改造方兴未艾,容器、PaaS平台等云化新技术发源于互联网公司,但在电信、电力、石油等传统行业也有广阔的应用空间,本文结合电信行业的应用特点,提出一种基于Kubernetes的PaaS应用管理平台的实现方案。本文的主要工作有:1)针对如何基于Kubernetes来构建PaaS应用管理平台这一问题,给出了整体实现方案,并结合典型的企业应用
随着娱乐多样性对游戏玩家的分流与手机游戏行业竞争的愈演愈烈,玩家流失成为游戏业务层需要解决的难题,有效的留存手段与回流策略制定能提高游戏整体利润。然而现有的方案仅局限于具体游戏,且日志数据均为静态数据而不是动态数据,现有方案仅针对玩家流失预测而未对流失原因做进一步猜测与分析。在本论文中,主要通过引进开源社区中数据收集、中间数据缓存、实时计算等大数据技术,设计从日志数据收集、数据汇聚与流失预测分析的
随着“中国制造2025”战略的不断推进,制造型企业的设备资产扩充迅速,生产线上的自动化设备越来越多,然而,企业现有的设备管理系统大多根据固有管理模式定制化开发,很难满足动态变化的新需求。因此,本课题受江苏南高智能装备创新中心委托,对江苏省智能装备产业联盟中的典型企业进行需求分析,设计并实现了一套基于SSM(Spring+Spring MVC+My Batis)的Web框架集的企业设备管理系统。首先
低场核磁共振检测技术因其无损性、准确性与稳定性等优势,广泛应用于医学、生物、化学与石油等领域。作为低场核磁共振检测技术的重要研究分支,反演算法通过分析检测样品内各弛豫组分幅值信号分布,定量获悉样品的物理或化学属性。而目前已有的反演方法主要可以分成迭代类算法与正则化算法,其中迭代类算法在确定迭代次数等方面存在缺陷,而正则化算法在确定平滑系数等方面遇到困难,且这些方法在多弛豫组分反演准确性上仍有较大的
违章建筑物严重阻碍我国经济建设和社会发展。针对我国现有违章检测技术以人工为主、精度低、智能化程度低的现实问题,本文致力于研究定点监控下可疑违章建筑物自动识别关键技术,主要研究内容如下:(1)提出了一种基于多特征融合的变化差异描述算法。利用结构自相似SSIM和自适应颜色迁移算法,消除因天气变化造成的新旧时相图像中局部差异,生成像素差异图像;针对像素特征难以描述建筑物结构变化的问题,利用局部梯度差异算
在稀相气力输送传输中,颗粒经过弯管之后,由于离心力的作用在弯管后的下游的管道中较为集中,形成相对致密的相结构,这种现象被称为绳索(Roping)现象。虽然国内外学者对绳索现象进行过一定的研究,然而对于绳索现象的扩散机理研究仍显不足。为了研究稀相气力输送系统中颗粒经过弯管后的扩散情况,本文利用高清摄像机获得弯管后(R/D=1.3,R是弯曲半径100mm,D是管道直径75mm)不同高度的截面上颗粒(粒