基于音频嵌入视频的HEVC音视频同步方法研究

来源 :宁波大学 | 被引量 : 0次 | 上传用户:lulu1984129
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多媒体服务中,音视频同步是影响用户感知体验的一个核心问题,其同步的好坏直接关系到在线视频点播、远程视频教学等多媒体服务质量的高低。以信息隐藏思想为基础的基于 H.26X的嵌入式音视频同步技术是解决这一问题的有效方式。然而,进几年随着数字多媒体技术的进一步发展以及人们对视频的质量要求越来越高,H.264/AVC在应用高清视频的音视频同步方面已经不能达到满意的性能要求,针对该问题,本文进行了基于 HEVC的嵌入式音视频同步方法以及同步质量评价模型的相关研究:  首先,针对高清视频序列,结合 HEVC帧内预测编码技术,通过对帧内预测模式相关性分析,提出了一种 HEVC帧内预测模式分组的嵌入式音视频同步方法,借助可变长编码思想对音频信息进行变长分组,通过变换读取音频信息的标志位,对应修改引入的哥伦布 exp-Golomb算法的K值,建立音频信息与预测模式的双映射关系,并针对剩下单比特音频信息情况,建立音频信息与预测模式的奇偶映射,既提升了音频嵌入容量,又保证了嵌入音频信息的完整性。实验结果表明,所提算法对高清视频序列音视频同步具有良好的适应性。  其次,选择帧间预测中最优预测模式占比较高的Skip模式进行调制,结合其不传残差和像素残差,只传送索引号至解码端的技术新特点,提出了基于 Skip模式的HEVC低比特率音视频同步算法。采用奇偶映射的方式,将 Skip模式运动矢量 MV索引号进行分类。只需调制其索引号,而无需对其运动矢量进行修改,不会产生误差也避免了因误差累计而造成帧间失真漂移现象。实验结果表明,该算法在较低比特率增加的情况下,较好的实现了音视频同步编码传输。  最后,对同步后的音视频序列构建模型并进行质量评价。在量化音视频特征的基础上,利用协贯量对音视频序列进行相关性分析,描绘音视频相关程度曲线,结合音视频主观质量评价方法,根据同步误差的变化,用相关度曲线量化估计同步误差对感知质量的影响,然后建立同步误差和主观质量的模型映射关系,从而实现音视频同步序列质量的快速、准确评价。  仿真实验表明,所提同步算法 PSNR下降控制在0.5dB以内,嵌入开销和比特率增长不足2%,充分保证了音视频的主客观质量。
其他文献
随着通信技术的飞速发展,语音增强技术的研究越来越受到人们的关注,语音增强主要是对带噪语音进行处理,从而达到改善语音质量,提高语音的清晰度、可懂度,易于被人接受的目的
随着立体视频的普及人们的视觉体验及生活品质得到了飞跃的提升,虽然仅传统的平面图像/视频的基础上增加了一个维度却给我们的生活带来了多种新的可能性。3D导航、3D医疗、3D
研究发现,呼出气中 NO(ppb级)气体的含量高低可以用来衡量哮喘患者病情的严重程度,而且研究证明了其为哮喘患者的唯一生物标记物。近年来,研发气敏传感器对人体呼出气中 NO含量进
随着传感器技术、无线通信技术和嵌入式计算机技术的迅速发展,无线传感器网络已经逐步成为当前无线网络界关注的新兴前沿科技研究热点之一,在众多领域具有十分广阔的应用前景
现阶段由于大量的袭击警察的社会事件的频发,已经引发人们开始思考警察在执法过程中是否已经成为执法的“弱势群体”.由于警察的性质、职能和权限等原因警察本不是“弱势群体
赤水河是长江上游右岸的一条重要支流,位于云贵川三省交界地带,发源于云南省的镇雄县,最终流经四川省汇入长江.赤水河地势南高北低,干流全长436km,其中遵义仁怀市境内长119km
红外硫系玻璃光纤可透中红外及远红外波段,且具有诸多优良特性如:化学稳定性好、折射率范围可调等,可用于传输红外激光,在军事、医疗等领域具有广泛的应用前景。  本文首先采用
我国不少中小型油库处在人烟稀少的环境下,由于油库的内部工作环境具有高危险性,并且油库管理的信息化水平不高,所以实现安全高效的远程管理具有重要意义。本课题所讨论的油
随着大数据时代的来临和“互联网+”技术的蓬勃发展,文本、静态图像、音视频等数字多媒体文件已经成为信息的重要载体,广泛应用于新闻、娱乐等各个领域,同时也带来了许多信息安
随着数据采集技术和嵌入式系统的飞速发展,以及现代工业测控领域,人们对数据采集的要求越来越高,本文提出了将这两种技术结合来实现微型化、大容量、高实时性、高稳定性和友