基于深度图像的绘制技术研究

来源 :上海大学 | 被引量 : 0次 | 上传用户:xmnp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着处理器能力的增强与三维显示技术的逐渐成熟,多视点视频的应用将越来越广泛。不同于传统二维视频,多视点三维视频可以让观看者从各种不同角度观看视频内容,使其有更真实与身临其境的现场感觉。由于源端的相机数是有限的,因此由用户视点和视向决定的任意视点的生成是多视点视频应用的关键问题之一,称为视点的稠密化或绘制技术。   近几年发展起来的基于图像的绘制技术已经引起人们的极大兴趣,并成为计算机图形学和虚拟现实领域的研究热点。从图像真实感和绘制速度而言,图像绘制技术具有传统基于几何模型绘制技术无法比拟的优势。基于深度图像的绘制(DIBR)技术是一种引入图像深度信息的图像绘制方法。目前MPEG/JVT拟采用“二维视频+深度”的3D视频表示方法,不需要传输多个视点视频,而是通过在解码端利用基于深度图像的绘制技术(DIBR),实时生成一个或者多个虚拟视点的3D场景,产生三维视觉效果并满足一定范围的视点选择的交互性。本文对DIBR的一些关键技术进行了研究,主要工作以及创新成果如下:   深度获取是DIBR技术的前提与基础。本文首先讨论了深度获取技术,重点研究基于立体视觉的深度获取。立体匹配是基于立体视觉获取深度的关键,在总结现有立体匹配算法的基础上提出了一种基于颜色分割的多目立体匹配获取深度图像的方法。首先对所有输入图像进行图像规正,消除因图像噪声、光照条件、遮挡等因素造成对应点在不同视点图像上的颜色差异。利用mean-shift算法,根据颜色信息分割参考图像,提取图像中的颜色一致性区域:然后通过局部窗口匹配算法进行多目立体匹配,得到多幅初始视差图;再根据融合准则将多幅视差图合成为一幅视差图以提高视差图的精度,并对视差图进行优化后处理;最后根据视差与深度的关系,将视差图转化为深度图。实验结果表明,该方法能获得准确且稠密的深度。   利用上述得到的深度图像,对基于深度图像的虚拟视点绘制技术进行了研究,提出一种平行摄像机配置下虚拟立体图像对的绘制方法。该方法首先利用一种非对称的高斯滤波来平滑深度图以减少虚拟视点图像中空洞的产生,然后利用3D图像变换(3D Image Warping)方程生成虚拟立体图像对,并用插值的方法处理空洞。该算法实现简单,能快速绘制质量良好的虚拟视点图像。   最后探讨了汇聚摄像机配置或其它一般摄像机配置下虚拟视点图像的绘制,针对由于场景物体间复杂遮挡关系导致的大空洞问题,本文提出一种基于图像融合与逆映射的虚拟视点图像绘制方法。该方法从多幅参考图像来合成虚拟视点目标图像,利用多幅参考图像提供的像素信息,通过图像融合与逆映射,较好地解决了虚拟视点绘制过程中的空洞问题,同时采用遮挡兼容算法解决了绘制过程中的可见性问题。实验结果表明,在给定摄像机参数的条件下能生成较高质量的任意虚拟视点图像。
其他文献
MIMO能大幅提升无线移动通信系统容量,但实现MIMO的智能天线等技术复杂度高,价格昂贵,目前难以实用。协作通信则是提升无线移动通信系统容量的另一种有效途径,它在多用户通信
TD-SCDMA(Time Division-Synchronization Code Division Multiple Access)标准是大唐电信集团代表中国提出,由国际电信联盟ITU批准并加入第三代合作项目的移动通信国际标准之
软件无线电技术自提出之后即在很多通信系统中得到了广泛的应用。收发信机由于受外界各种因素的影响,导致各信道输出信号功率相差很大,不利于后续处理。为了解决这样的问题,
随着数字技术的飞速发展,高速数据采集系统也迅速地得到了广泛的应用。在生产过程中,应用这一系统可以对生产现场的工艺参数进行采集、监视和记录,为提高生产质量,降低成本提供了
硅钢带是制造电机和变压器最重要的材料之一,要求其表面必须绝缘,故需要在其表涂上多层绝缘材料,涂层的质量直接影响其最终产品——电机和变压器的性能,因此在硅钢带生产过程
合成孔径雷达全天候、全天时的特性导致数据量庞大,数据压缩成为一大难题。目前的光学图像压缩算法未充分利用SAR图像的特征,在SAR图像压缩上效果不好。受JPEG2000的感兴趣区
由于扩频技术拥有极强的抗人为干扰和抗截获的能力,因此被广泛的应用于军用通信领域。在扩频技术中,结合了直接序列扩频技术和跳频技术优点的DS/FH混合扩频技术可以突破单一
射频识别(Radio Frequency Identification,RFID)技术是这几十年来发展速度快,很有前途的一项自动识别技术。它具有效率高、识别速度快、可靠性好、非视距识别和能够工作在恶
单根烟自动检测系统是安装于卷烟包装机下烟道的装置,用来完成对空头烟检测并剔除的功能。但是目前的单根烟自动检测系统存在着兼容性差、识别准确率低等问题。因此,如何提高
在电力系统中,带有指针的仪器仪表有着广泛的应用,它们能否正常运行对于整个电力系统的安全运行有着至关重要的作用。本文主要介绍了在基于ARM嵌入式的视频监控系统中,实现对