【摘 要】
:
无监督领域自适应是弱监督学习中一个基于迁移学习思想的重要研究问题。深度神经网络的训练十分依赖于数据驱动,然而,对于许多预测任务,特别是稠密估计任务,其标记过程通常是昂贵或劳动密集型的,收集大规模和多样的数据集十分困难;其次由于图像在不同模态间存在域漂移,在一个域上训练模型并在另一个域上测试该模型时,深度模型的性能会显著下降。这限制了模型在大规模有标记数据集上训练,然后将模型迁移到来自不同领域的新数
论文部分内容阅读
无监督领域自适应是弱监督学习中一个基于迁移学习思想的重要研究问题。深度神经网络的训练十分依赖于数据驱动,然而,对于许多预测任务,特别是稠密估计任务,其标记过程通常是昂贵或劳动密集型的,收集大规模和多样的数据集十分困难;其次由于图像在不同模态间存在域漂移,在一个域上训练模型并在另一个域上测试该模型时,深度模型的性能会显著下降。这限制了模型在大规模有标记数据集上训练,然后将模型迁移到来自不同领域的新数据集上,但这在现实应用中是经常需要的。为了克服这些问题,无监督域自适应提供了一种有效的解决方案,以减轻有标记的源数据和无标记的目标数据之间的域漂移。可以将无监督域自适应方法大致分为两大类:非对抗学习的方法和基于对抗学习的方法。传统的非对抗学习的方法通常使用一种度量作为目标,直接度量并尽量减少源域和目标域之间的高维特征的差异,这种方法在简单的数据分布中是有效的,但在复杂的数据分布中往往效果不佳。尽管生成对抗学习方法相对于非对抗学习方法已经取得了一定的性能提升,但是以往的生成对抗学习方法往往直接对源域和目标域进行域对齐,忽略了源域和目标域之间的中间潜在分布;并且这类方法通常作用于全局特征,这使得深度模型的学习过程存在冗余。针对这些问题,本文利用生成对抗学习方法提出一种基于双向对齐的无监督领域自适应方法和一种基于注意力机制的无监督领域自适应方法。同时在不同的跨模态图像数据集和不同的应用任务上,验证所提出方法的有效性和泛化性能。本文的主要贡献总结如下:1.本文提出一种新的基于双向对齐的无监督领域自适应方法。通过图像翻译器双向生成源域和目标域的中间潜在模态,利用生成的中间模态作为源域和目标域之间的桥梁。并提出域间一致性和域内一致性学习策略分别对源域与源域生成的中间模态,源域生成的中间模态与目标域进行对齐,反之亦然。该方法主要利用生成对抗学习方法进行双向的无监督领域自适应,从整体风格和样式角度消除域差异,使得领域分布一致。2.本文进一步提出一种新的基于注意力机制的无监督领域自适应方法。通过对偶注意力机制生成自注意力图,并利用生成对抗学习实现基于注意机制的一致性学习,使模型具备全局一致性的同时也具备局部一致性,尤其更加注重局部的有效性特征迁移。通过迁移大部分具有识别性的局部特征来实现更有效的域适应,使得通过该方法得到的模型即使在小目标或细粒度化的任务中也可以获得很好的性能。3.本文将所提出的基于双向对齐的无监督领域自适应方法应用于跨模态(照片—漫画)人脸属性分类任务。针对该任务,本文还构建了一个包含50个人脸固有属性的漫画属性数据集Web Cari A,以便于漫画属性学习的研究。本文将所提出的基于注意力机制的无监督领域自适应方法应用于跨模态(T1—T2)脑肿瘤磁共振成像分割任务。针对该任务,本文还设计了一个对偶注意力深度编码器-解码器模型。本文在Web Cari A数据集和bra TS多模态脑肿瘤数据集上进行了丰富的实验证明了所提出方法的有效性,其性能优于目前最先进的方法,证明所提出的方法对于不同任务在不同数据集上均具有很好的泛化性能。
其他文献
近年来,过渡金属参与的C-H键活化备受人们关注。它可以在温和的反应条件下有效地构建一系列的C-C键或C-X(X=N,O,P,S,Se,Br等)键,并成功用于合成天然产物和药物分子等领域。然而,反应的位点选择性依旧是当前面临的最大挑战。通常的解决方案是在底物上引入一个导向基团,但这无疑给反应体系的后处理增加了步骤,因此需要开发易于安装和拆卸的导向基。在众多导向基中,氧酰胺基团(Oxyacetamid
目前,我国的移动支付技术引领世界,移动支付不仅给人们生活带来极大便利,同时也促进了传统行业的革新。在移动支付、物联网、人工智能等技术的驱动下,传统的零售行业开始进行技术改造,零售业正向智能化、无人化方向的新零售方向发展。在转型升级的过程中,无人零售成为新零售的热点,其主要运用在无人便利店、自助售卖机等消费场景。相较于传统零售,无人零售节省了人力成本,提高了支付效率,减少了用户的排队等候时间。新的零
亚稳β型Ti-Nb合金具有较低的弹性模量、良好的耐腐蚀性能和生物相容性等优点,在生物医用材料领域有着广阔的应用前景。作为骨生物移植材料,其磁学性能对合金的核磁共振成像以及移植材料周围的细胞的分化与生长会产生重要影响。在本课题组近期在对Ti-Nb合金的电子结构分析时发现β-Ti0.75Nb0.25结构中如果出现两个Nb与Ti共线成键,Nb和Ti之间产生较强的磁耦合,使得β-Ti0.75Nb0.25产
随着航空航天、生物医疗等领域快速发展,对小批量、个性化、低成本生产模式与技术的需求日益旺盛。渐进成形作为一种快速无模成形工艺,具有高灵活性、短制造周期、低成本等优势,受到越来越多的关注。当前,超声能场在常规成形工艺中的有益效果已得到实验验证,但其作用和影响机理仍不明晰。基于此,本文以AA1050-O板材为研究对象,将超声振动引入渐进成形过程中,并通过本构关系建模、有限元分析以及微观组织分析等手段探
随着机械制造行业迅猛发展,对相关刀具研究也吸引众多学者的目光。如何提高刀具的使用寿命,并保证较高的加工精度成为亟待解决的问题。目前,常见延长刀具使用寿命的方法就是在刀具表面镀膜,以延缓刀具磨损。随着光电行业迅猛发展,众多微小元器件的加工也是学者们研究的重要内容。传统电镀金刚石微磨具虽然加工精度高,但是由于金刚石磨粒只是机械镶嵌在结合剂中,在磨削过程中承受高频冲击,磨粒极易脱落,大大地影响微磨具使用
聚乙烯醇(PVA)纤维是一种有机合成材料,在混凝土中具有较好的亲水性,与水泥基体粘结性强,能长期有效限制混凝土开裂。近年来PVA纤维在土木工程中有着广泛的工程应用,但随着纤维含量的增加,混凝土流动性显著降低,由此带来的施工困难、混凝土密实度下降等问题,极易导致结构内部受到氯盐侵蚀,削弱钢筋与混凝土间的粘结性能,影响结构的耐久性。目前,有关氯盐侵蚀对钢筋与PVA纤维混凝土间粘结性能影响的研究相对较少
随着时代的发展,在互联网上观看电影等影视资源已成为人民群众重要的精神娱乐来源。电影推荐系统不仅能给用户带来良好的观看体验,满足其个性化需求,还能为视频网站带来巨大的广告收益。电影推荐系统涉及技术众多,其中电影推荐算法是其最核心的技术,目的是准确地挖掘出用户需要或感兴趣的信息。基于深度神经网络的电影推荐算法具有特征学习能力强、实时性好等特点,也存在着对低阶特征组合学习不足、无法利用电影名称等辅助性信
科学技术的进步极大地促进了现代工业的发展,同时对工程材料性能的要求也越来越苛刻,传统的铝合金材料已经无法满足要求。原位合成铝基复合材料由于具备增强颗粒和基体的双重优势而成为材料领域的研究热点。然而,目前已开发应用的原位合成铝基复合材料体系较少,并且反应生成增强相的同时往往伴随着粗大或者具有特殊形貌的有害相。目前研究较多的原位体系为Al-ZrO2体系,但该体系反应生成的ZrAl3粒子在应力的作用下会
氧化锌基薄膜材料(ZnO)由于其较为优异的光电性能而被作为一类新的透明导电氧化物材料。在对ZnO材料实验研究的基础上,已经将ZnO薄膜材料应用在太阳能电池、液晶显示器、薄膜晶体管等领域。本学位论文中,利用磁控溅射技术在玻璃基底上制备Mg-Al-Ga:ZnO薄膜(MAGZ)以及由金属Cu和MAGZ构成的复合薄膜。通过使用X射线衍射仪(XRD)对薄膜材料的结构进行测定,利用原子力显微镜(AFM)、场发
当前Android系统已成为最主要的移动互联网平台,并且Android的技术开放性为移动设备厂商对官方系统进行定制化开发提供了便利。相关研究表明,这些定制化的Android系统,特别是其引入的大量服务扩大了Android系统的攻击面。为了保障定制Android系统的安全性,研究并实现对其中服务的有效测试成为必要。针对现有服务模糊测试工作中因缺乏服务接口签名导致的测试效率低下问题,提出一种服务接口签