不稳定传输中受损视频的低延迟修复方法

来源 :中国科学技术大学学报 | 被引量 : 0次 | 上传用户:xiwang1998
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频流量已逐渐成为移动流量的重要组成部分,而不稳定传输中的视频缺损却仍然是一个亟待解决的问题.这种类型的视频缺损往往带有完全随机的特性,很难对其进行低延迟并且高精度的修复.我们率先关注了该不稳定传输中视频修复的任务,并提出了一种低延迟的视频修复方法,该方法包括两个阶段:在粗略修复阶段,先从参考帧中提取受损的二维光流图,再建立线性预测模型,根据运动在时间维度的连续性,来对受损帧进行初步的粗略修复.在精细修复阶段,提出了一个部分卷积神经网络(PCFC-Net),用于对所有参考信息进行综合并计算精细修复的结果.与基线相比,该方法在DAVIS数据集上的参考帧等待时间大大减少,同时PSNR和SSIM也提高了4.0% ~12.7%.“,”Video traffic has gradually occupied the majority of mobile traffic, and video damage in unstable transmission remains a common and urgent problem. The difficulty of inpainting these damaged videos is that the holes randomly appear in random video frames, which are hard to be well settled with both low latency and high accuracy. We are the pioneer to look into the video inpainting task in unstable transmission and propose a low-latency video inpainting method which consists of two stages: In the coarsely inpainting stage, we achieve the extraction of damaged two-dimensional optical flow from reference frames, and establish a linear prediction model to coarsely inpaint the damaged frames according to the temporal consistency of motions. In the fine inpainting stage, a Partial Convolutional Frame Completion network( PCFC-Net) is proposed to synthesize all reference information and calculate a fine inpainting result. Compared with that of the state-of-the-art baselines, the waiting time for reference frames is greatly reduced while PSNR and SSIM are improved by 4. 0% ~12. 7% on DAVIS dataset.
其他文献
随着人工智能与实体经济融合步伐加快,智能制造成为中国制造业转型升级的方向.基于价值网络分析方法,本文对广东省东莞市机器人智能装备产业发展进行研究.研究结果表明,在制造业转型升级过程中,当出现本地智能化潜在需求却缺乏技术供给的条件下,地方政府通过制定和实施激励政策在刺激有效需求的同时吸引创新资源的集聚,这是推动制造业集群智能化和发展人工智能产业的基本战略选择.培育和完善包括制造企业、人工智能企业、新型研发组织、战略联盟和政府在内的多元创新主体构成的产业创新生态系统是促进智能科技产业化和产业智能化发展的基础.
2017年以来,美国、欧盟、英国、日本、韩国、俄罗斯、加拿大等主要国家和经济体相继发布人工智能研发战略,结合本国国情谋划人工智能未来发展路线,对人工智能的未来发展方向及优先领域进行系统布局.本研究基于人工智能技术和社会双重属性,提出用于分析人工智能路线图规划模式的“菱形”分类图,通过分析主要国家的人工智能发展战略,探索凝练出典型的规划模式,即美国的“全面技术引领型”模式、欧盟的“伦理深度介入型”模式、英国的“伦理约束下的双驱动力”模式、日本的“智能社会导向型”模式、韩国的“产业结合与领域选择型”模式、俄罗
人工智能在创造巨大经济价值、引领产业变革同时也引发众多风险.从信任角度看,诸多风险问题都与技术信任密切相关,且风险情景下技术信任更加复杂并充满挑战.本文梳理提炼既有技术信任文献,从主导范式、能动主体、核心愿景、规制体系4个维度构建人工智能技术信任机制模型.研究发现:责任式创新能够为风险情景下的技术信任提供方向指示和行为准则并成为主导范式;技术信任核心愿景包括技术可用性、可靠性、可知性、可控性和可追责;技术信任机制建立需政府、行业组织、企业等主体共同参与;以法律为保障的风险防控体系和以伦理为导向的社会规范体
经济社会的发展、生活条件的改善、寿命的延长带来了人口老龄化等一系列问题,同时互联网信息技术的迅速发展为居家养老服务业带来了新的机遇.如何在信息时代创新养老服务体系,将居家养老与互联网信息技术相结合,为我国居家养老服务体系建设探寻实践路径,成为亟待解决的问题.由罗艳编著、中国社会科学出版社出版的《居家养老服务信息化的建设实践》一书,立足于信息技术视角来探索居家养老服务信息化建设的实践路径,为当下养老服务的信息化建设和创新管理提供了借鉴和思考.
期刊
随着社会的不断发展,国际竞争日趋激烈,人才资源逐渐成为推动国家进步的重要力量和推动社会改革的战略性资源.高校作为我国人才培养的主阵地,在培养储备人才方面发挥着不可忽视的重要作用.而今,信息技术的深入发展给我国高校教育管理带来了新的机遇和挑战.由吕村、谭笑风编著,吉林文史出版社出版的《高校教育管理与教学研究》一书,基于信息高速发展的当下,分析大数据时代给高校教育管理带来的机遇和挑战,深入解析高校教育管理,并为教育管理改革提供创新性思路.
期刊
在“互联网+”跨界融合理念的指引下,各行各业高速发展的同时也出现了诸多管理难题.高校后勤管理中传统的管理模式、资源配置和服务体系也同样面临着新的挑战,数据和信息将成为整个高校后勤管理系统中的核心驱动力量,是实现高校后勤智慧化的重要手段.由石国兵编著、武汉大学出版社出版的《高校后勤管理信息化研究及实践》一书,参考了部分高校后勤管理信息化建设的实践内容,从后勤管理模式创新和后勤服务体系建设两个方面研究了新时代的信息化技术在高校后勤管理中的应用.
期刊
血管内皮细胞是机体维持血管健康和稳态的关键细胞类型.内皮细胞功能失调(endothelial dysfunction,ED)作为泛血管疾病(panvascular diseases)的核心环节,是一个多步骤、多危险因素参与的复杂病理过程,涉及内皮细胞损伤死亡、通透性的增加、血管收缩、炎症、氧化应激、白细胞向内皮细胞的黏附、代谢异常、内皮-间充质转变、血小板聚集与血栓形成等.ED在心血管疾病(动脉粥样硬化、高血压、心衰、外周血管病变)、肿瘤、代谢性疾病(糖尿病、肥胖、胰岛素抵抗、脂肪肝)、呼吸系统疾病(急性
量子不可克隆定律赋予了量子通信基于物理学原理的安全性,其代价是长程传输的光子损耗不能使用传统的中继放大器来克服.量子中继及量子U盘是实现远程量子通信的两条可行的技术路线,近期本团队在这两条路线上都取得了显著进展:首次基于吸收型存储器建立多模式量子中继,并将相干光存储时间提升至1 h.本文介绍了量子通信、量子中继及量子U盘的基本原理,在此基础上介绍近期本团队取得的相关成果.
探索高性能电化学析氧反应(OER)催化剂是可再生能源储存和转化的关键.OER过程中的结构重构被认为是高活性催化剂的关键,而追踪OER过程中催化剂的动态变化及识别真正的活性位点则具有挑战性.同步辐射技术能够获得材料中具体元素的局域原子配位环境和电子结构信息,特别是原位测试允许在工况下监测表面氧化状态和局部原子结构转变,能够促进对反应机理的基本理解.因此,在这篇综述中,我们讨论了重构OER电催化剂的最新进展和未来的机遇,重点综述了OER电催化剂重构的诱因及应用、利用原位同步辐射技术追踪重构OER电催化剂的动态
LncRNA在真核生物中广泛转录,且响应于细胞外环境的变化.相比于mRNA,人们对lncRNA在DNA损伤应答中的作用了解甚少.基于高通量测序,本文系统地分析了裂殖酵母在4种DNA损伤药物(喜树碱、羟基脲、甲基磺酸甲酯和腐草霉素)处理下的lncRNA表达谱.与mRNA相似,在DNA损伤环境下,lncRNA的表达谱也发生了剧烈变化.161个受到4种药物共同诱导的lncRNA及194个受到共同抑制的lncRNA被定义为核心DNA损伤应答lncRNA.LncRNA表达谱和mRNA表达谱之间的差异表明,lncRN