低延迟视频传输智能流控技术研究

被引量 : 0次 | 上传用户:zmstar
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
物联网、移动互联网的快速发展促使网络视频业务逐渐由视频网站、视频点播为代表的传统流媒体业务向视频物联、视频直播、视频会议等新型视频网业务扩展,而新型视频网呈现出连接量大、接入方式多样、上下行视频数据量大等明显的“大连接”特征。动态网络环境对大连接视频网的用户体验质量(QoE)保障造成了严重的困难,特别是如何实现低延迟视频传输成为大连接视频网核心业务的瓶颈问题。低延迟视频传输在带宽和延迟方面对网络流控提出了严苛的要求。传统的流控算法无法自适应地应对异构、时变、动态的网络环境,导致目前的视频网业务用户QoE不佳。本文将人工智能中强化学习方法引入到低延迟视频流控过程中,提出了一系列低延迟视频智能流控算法,有效提升了网络自适应能力与鲁棒性,显著提高了用户QoE。本文的研究内容与主要贡献总结如下:(1)率先进行了大规模低延迟视频流的QoE性能测量研究。在国内销售规模最大的电商直播平台-淘宝直播系统中收集百万级视频会话,设计了低时延视频传输QoE度量指标并对传输层与应用层数据进行分析;构建了低延迟视频传输流控算法评测系统,对代表性算法开展了多维度QoE的深度测评。测量发现,30%的用户QoE较低,根本原因为传统的流控算法只考虑了传输层信息,没有结合低延迟视频业务的应用层的编码与动态特性,导致二者码率不协调;低延迟视频传输中还存在流控算法自适应能力弱、不可靠等问题,是影响QoE提高的关键因素。(2)针对视频应用层编码器与传输层码率不协调问题,本文提出了基于深度模仿学习的视频码率协调算法Concerto。该算法在分析网络传输层和应用层状态后,根据模仿学习的监督机制提取编码/网络动态的高层次语义特征,为视频帧确定合理码率。为了强化特征表征能力,使用大规模的真实网络数据训练Concerto,同时引入了定制化损失函数与码率平滑机制,以保证智能流控算法满足低延迟视频传输需求。实验结果表明Concerto有效解决了码率不协调问题,将用户QoE提升了 23%。(3)我们发现,将智能流控算法直接部署于实际系统的离线学习模式导致了“仿真-现实”差异问题,本文提出了在线强化学习驱动的自适应视频流控算法。通过设计两阶段在线强化学习架构OnRL,将独立的强化学习智能体直接部署到每个视频会话,实时地做出视频码率决策,并随时间实时演化其学习模型;然后根据联邦学习策略进行网络状态感知的模型聚合,形成一个具有高层次语义信息的群智模型,以迅速应对未知的动态网络变化。OnRL还融合了强化动作执行机制以及安全切换策略来提高在线训练的自适应能力。在淘宝直播系统为期一个月的线上评估表明,OnRL将视频卡顿率降低了14.22%。(4)我们进一步发现,强化学习驱动流控算法的探索与试错机制引发了决策不可靠问题,会导致QoE长尾现象,本文提出了深度混合学习驱动的鲁棒视频流控算法Loki。通过将规则驱动与学习驱动流控算法进行深入融合,达到充分利用二者优势的目的。为了实现特征级融合,我们将基于规则的流控算法设计成一个等效的黑盒神经网络模型,然后提出了双重注意力特征融合机制来结合规则与学习算法优势。Loki在淘宝直播系统进行在线训练,为千万级视频会话提供码率调控策略。实验结果表明Loki有效提升平均QoE的同时显著减缓了 QoE长尾现象,如将卡顿率长尾降低26.30%~44.24%、视频吞吐量提升1.76%~2.17%。最后,基于上述算法,本文实现了一个低延迟视频传输智能流控原型系统,具有一套智能流控、用户管理与服务质量监控等功能,验证了本文方法的先进性。本文成果已稳定服务于淘宝直播的亿级视频用户,并在小米电视投屏等业务推广使用。
其他文献
近年来车企纷纷转型升级,汽车领域前景广阔。为了满足人们对个性化、多样化的追求,车企们不断推出新的车型,车身造型的更新愈加频繁。车身造型因其结构要求高、设计复杂、专业性强对模具设计有着很高的要求。目前计算机辅助模具设计在一定程度上简化了模具设计过程,但其重复性高、智能化水平低等问题严重影响了模具设计的效率和开发周期。模具研究者们逐渐认识到提高智能化水平、充分运用积累的设计经验的重要性。如何利用知识工
学位
伴随着互联网技术的深度发展,算法逐渐成为决策的辅助者,甚至成为决策者。算法自动决策在社会生活的方方面面都可以发挥作用。公众对其安全性的担忧也随着技术的进步到达了新的高度——一个普罗大众几乎都没有能力知晓却可能会对他们权益造成影响的技术却没有对应的法律进行规制。该如何保证收集信息的准确性、算法自身和输出结果的安全性?同时又该如何保证算法主体不利用自身优势地位滥用算法?归根结底,都是需要对算法黑箱进行
学位
详细阐述和研究了在如火如荼的电力大数据环境下,如何实现电力各专业海量数据接入到电力大数据中心,介绍了常用数据接入技术概念、特点和应用方法,同时介绍分析了电力大数据接入过程存在的困难及需要解决的问题,并开展了海量高质量数据接入技术研究。
会议
数据挖掘指的是从数据中提取出一些相关信息的计算机处理过程,其基本原理是对海量的原始文本进行复制,从中提取出有关信息,再进行重新组合,从而获得可能存在的新的、潜在的未知信息。随着人工智能时代的到来,解决问题的研究方法从基于假设的方法转变为基于发现的方法,因此,数据挖掘无疑是研究人员处理海量信息的最佳工具。因其具有降低数据处理成本、提高分析效率的优势,数据挖掘在多个领域得到了广泛的应用,它不仅是数据产
学位
能源大数据中心的建设是国家“新基建”的重点范围,是响应国家“碳中和、碳达峰”发展目标的重要措施,而能源大数据标准体系是能源大数据中心建设的重要保障,可以规范、指导各地能源大数据中心的建设。在全面调研能源行业和大数据产业发展趋势,结合大数据领域前沿技术,分析国内外能源大数据服务产业相关标准的发展现状、发展趋势和实际需求的基础上,创新性提出能源行业大数据中心数据标准体系框架,覆盖基础标准、数据标准、技
期刊
最近几年,国内外各大桥梁频频发生事故,桥梁的检修、维护等安全性问题也越来越受到各个国家的重视。斜拉桥拉索表面保护层的缺陷主要包括开裂、变形、磨损、腐蚀、老化等。传统的人工拉索检测方式费时费力,还比较危险,而现存的计算机视觉检测方法适应面窄,且普遍对光照不均的抗干扰性较差。为了更快速准确地对斜拉索表面进行缺陷检测,本文依托于实验室的爬索机器人,设计了一套基于计算机视觉的拉索检测系统,既可以实时对拉索
学位
随着算法技术与数据交汇融合时代的到来,以深度学习为技术特征的算法在人脸识别、新闻推送、行政管理等领域得到广泛运用,极大地提高了国家治理效能、社会生产效率和个人生活的便利度。但是因算法本身具有高度复杂性和不透明性,其广泛运用除了带来良好效益外,也带来了诸多法律风险,譬如,算法歧视、算法垄断、算法权力异化的风险。这些风险小则对个人平等权益造成损害,大则给社会公正秩序和国家安全带来挑战。基于此,本文以当
学位
推动县域医保的数字化转型升级是建设县域智慧医保、数字医保,实现县域医保业务“一网通办”,提升县域医保经办效率,推动医疗保障制度改革和医疗保障管理创新的必然要求。为进一步推进县域医保的数字化转型,加快智慧医保、数字医保的建设进度,滕州市医疗保障局借助国家医保信息平台的统一上线,积极推进医保业务智能化、医保决策数字化、医保服务智慧化,推动滕州市医疗保障数字化转型升级,推动医疗保障制度的改革与医疗保障管
学位
本文通过分析电网业务实际,构建电网业务模型,通过分析数据接入、数据治理、数据模型、通用分析模型及数据服务的逻辑关系,连接各层级与各业务,提出利用云环境中的大数据人工智能分析工具对数据进行再加工的方法,并在“设计验证”、“试点建设”、“推广建设”三个主要阶段对中台的设计进行了详细定义,通过引入领域驱动思想,构建一个高内聚低耦合的业务子域,通过优化模型、数据共享等措施,搭建基于电网企业数据人工智能中台
期刊
本研究由吉林省科技厅科技攻关项目(20190301015NY)课题资助。鸡蛋是人体日常补充蛋白质的主要来源之一,具有高营养、易吸收、价格低廉的优势,深受广大消费者的青睐。蛋清粉(Egg white protein powder,EWPP)是将蛋清除水干燥后得到的粉状蛋白制品,相较于鲜鸡蛋具有保质期长和易运输等优势,并以其卓越的营养价值被广泛应用于食品工业中。但EWPP在溶解的过当程中易结块,限制了
学位