论文部分内容阅读
多视点视频是由摄像机阵列从不同角度拍摄同一场景得到的一组视频信号,包含了丰富的3D场景信息,将广泛应用于任意视点视频/任意视点电视、3D视频/3D电视等多种正在兴起的多媒体业务。然而多视点视频的数据量随着摄像机的数目增加而线性增加,巨大的数据量已经成为制约其广泛应用的瓶颈。多视点视频编码(MVC)技术主要致力于如何提高多视点视频的压缩编码效率,越来越受到学术界和工业界的密切关注。目前,MVC将作为H.264/AVC的第四个增修案,由运动图像专家组和视频编码专家组共同组成的联合视频小组正致力于MVC的标准化工作。本论文主要研究提高MVC编码效率的技术,主要研究内容及成果如下:1. MVC参考预测结构对每个视点在时间方向上采用分层B帧预测结构。根据不同时间层视点间预测对编码效率的贡献系数不同,提出了一种MVC分级预测结构。该结构对于时间相关性占主导的时间层的图像将不使用视点间预测。2.在一个GOP内,对于不同的时间层的图像进行编码时,视点间参考图像对编码效率的贡献系数随着时间层的增加而减小。据此,提出了一种灵活MVC预测结构。当前编码图像的视点间参考图像对编码效率的贡献系数可由已编码图像预测得到。如果视点间参考图像对编码效率预测的贡献系数很小,当前编码图像仅使用时间参考图像。3.与单视点视频编码标准不同,MVC在使用时间参考图像去除时间冗余的基础上增加了使用视点间参考图像去除视点间冗余的可能。MVC空间DIRECT模式照搬H.264/AVC的参考图像选取方法,忽略了MVC参考图像列表的多样性。基于此,提出了一种改进的MVC空间DIRECT模式参考图像选取方法。4.多视点视频由一组摄像机同步拍摄得到。自动白平衡是摄像机内部完成颜色补偿的主要模块,如果每个摄像机都能通过自身参数调节使得所拍摄的图像颜色逼真,则整个MVC系统所有视点的图像就达到了颜色的一致性。提出了一种基于灰度颜色点提取的自动白平衡方法,具有良好的收敛性。5.实际中,各视点之间往往存在颜色差异,降低了MVC视点间预测的准确性。提出了一种基于颜色空间转换矩阵的MVC颜色补偿方法。该方法在RGB颜色空间上建立颜色补偿模型,并进一步将颜色补偿模型扩展到YCbCr颜色空间以适用现有视频编码标准。与原始视点间参考图像相比,经过补偿后的视点间参考图像与当前编码图像更为相似,从而提高了MVC的编码效率。此外,颜色补偿模型参数可以分别从编码端和解码端推导得出,不需要将其写入码流。