基于图卷积网络的领域适应模型

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wangyc726
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
迁移学习自机器学习研究之始就备受关注,其旨在令算法获得如图人类举一反三一般的强泛化能力。领域适应是迁移学习的其中一个分支。给定两个相似性较强但样本分布不同的领域,经典领域适应问题要求通过源领域的有类标样本训练一个分类器,在缺少类标或者只有少数类标的目标领域中得到有效的分类效果。得益于神经网络强大的特征学习性能,许多学者基于深度卷积网络对领域适应问题进行了探究,并提出了一系列算法。然而,这些算法主要着眼于设计不同的分布度量及相应的损失函数,以卷积层和全连接层为基础的深度卷积网络不关注样本之间的相关信息。使用领域分布损失进行特征变换时,容易将原本相关的目标领域样本变换到不同类别当中去,导致目标领域的分类性能有所下降。近年来,研究者们成功将图卷积模型优化为一种和神经网络相似的,通过反向传播进行学习的网络层,并将其应用到半监督分类、单次学习等迁移学习问题中。图卷积网络通过样本间的相关性图,融合近邻样本之间的相关信息,在领域适应任务中的效果值得期待。本文首先研究了基于图卷积网络的领域适应模型算法,该算法利用预先提取的特征构造一个基于所有样本的全局相关性图,并利用带有最大均值差异损失的图卷积神经网络进行两个领域中样本特征的分布逼近。通过这种方法,模型有效保留了样本间的结构信息。提出的算法在一些经典的领域适应数据集中获得了良好的分类效果,证明了关注样本间的相关性在领域适应问题中的必要性。在此基础之上,我们注意到图卷积网络所使用的全局相关性图需要所有样本的特征以进行提前构造。这既导致了图卷积层不能直接融合深度卷积网络进行端到端学习,也导致图卷积的性能十分依赖于预提取的特征好坏。本文提出了一种随训练更新相关性图的技巧和一种基于类标和伪类标的样本采样方案,通过两种方案的结合使用,整个网络得以进行小批量样本的学习,进一步提升了图卷积网络在领域适应问题上的泛用性。
其他文献
研究背景和目的增生性瘢痕是临床常见病和多发病之一,是创伤后人体自我修复过程中的异常反应,以成纤维细胞增殖失控和胶原等细胞外基质过度沉积为特征的人类真皮区特有的纤维
随着互联网、信息技术及存储技术的快速发展,数据量呈指数增长,获取大量有标记数据样本十分困难,而获取大量未标记数据样本相对容易。半监督学习和迁移学习都能够利用少量已
合理限度内的私力救济为民法所认可,但过限的私力救济是否必然成立犯罪?本文将关注点集中于权利行使与财产罪之关系,力图在探讨法秩序统一性、刑法与前置法关系、财产罪有因性与无因性问题的基础上,对二者关系形成较为体系的类型化梳理,从违法相对论角度梳理相对普适的判断基准和逻辑进路,即评价财产罪时是否纳入民事基础关系要素,如果纳入,该要素位于评价体系的哪一层面,其评价效力如何?本文阐述之理论主要分为三个板块:
荧光传感器由于具有特异性强、灵敏度高和操作简便快捷等优点,现已广泛应用于环境化学、生物化学和医学诊断等学科中。由于剧毒性、持久性和生物富集性等特点,汞被认为是环境
图像超分辨率通常是指以低分辨率图像为线索,经过推理计算获取边缘清晰、细节合理的高分辨率图像的过程。本文主要对以单幅图像为输入的情况进行研究和改进。由于清晰明确的
水声传感网络采用声波作为主要通信方式,是当今应用较为广泛的水下组网方式。然而由于水声信道具有长和多变的时延、窄带宽、多径效应等问题,水声传感网络的发展面临严峻的挑
癫痫(Epilepsy,EP)是一种常见的以短暂性中枢神经系统功能失常为特征的脑部疾病,具有反复发作和难以预测等特点。癫痫发作不仅严重影响癫痫患者的正常生活,而且给患者的家庭
为满足日益增长的终端设备的接入需求,802.11工作组提出IEEE 802.11ah标准来支持大规模设备的接入。然而,大规模设备同时接入网络,会导致严重的信道冲突。为此,802.11ah在媒
在写作的过程中,错误是很常见的。对写作纠错反馈的研究一直都是二语习得领域的一个重要问题。写作是学生必须掌握的一门技能,同时也是教师在英语教学过程中重要的一部分。在英语教学过程中,写作纠错反馈扮演了非常重要的作用,它也是学生输入的主要方法,也是语言输出的基本保证。书面纠正反馈的效果直接影响学生写作水平的提高,也反映了教师的教学效果。虽然国外关于学生写作纠错反馈的偏好与教师实践进行了大量的研究,但是中
目的:测量并根据右主支气管(RMB)长度,预测支气管封堵器(BB)用于左肺单肺通气(OLV)时的临床效果,为麻醉医师合理选择BB进行肺隔离提供理论依据。方法:选择择期行胸腔镜下右肺叶切除术的患者46例,ASAⅠⅡ级,男女不限,年龄3070岁,BMI 1929kg/m2。根据患者术前胸部CT扫描图像,利用气道多平面重建(MPR)技术测量RMB长度,将RMB长度≤1.5cm的患者纳入A组,将RMB长度