注意力机制在糖尿病视网膜病变识别中的研究

来源 :广东技术师范大学 | 被引量 : 0次 | 上传用户:a98674591
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
糖尿病视网膜病变是糖尿病的并发症,也是导致视力丧失的罪魁祸首之一,早发现早治疗对防止视力丧失至关重要,眼科专家通过分析眼底图像来诊断糖尿病视网膜病变,不仅效率低下,更占用专家人力、依赖眼科专家的从业经验。深度学习已经在医学图像处理领域取得长足进展,可作为医疗人员的辅助工具。眼底图像作为重要的诊断参考依据,它的病灶稀疏,相邻等级的病变差异较小,不同性别、年龄、种族的患者所患的同种病变存在差异,基于此,本文提出使用能捕获关键线索的注意力机制来进行糖尿病视网膜病变的等级识别,针对这一出发点,本文研究了在识别糖尿病视网膜病变等级上,注意力机制在卷积神经网络中的性能,自注意力网络Vision Transformer的性能,展开的研究工作如下:(1)针对数据集类间数量不平衡问题,本文提出使用VQ-VAE对经过仿射变换的图像进行重构,以丰富、平衡数据集,测试结果显示模型的平均重构误差为0.0001,重构图像与原始图像的结构相似性均值为0.967,证明重构图像与原始图像互异且属于同类图像,既扩充了数据集也增加了数据集的多样性。(2)针对注意力机制在卷积神经网络中对糖尿病视网膜病变等级识别研究,本文以Res Ne Xt50为主干网络,通过修改网络结构,嵌入不同的注意力模块,提出卷积通道注意力网络Res Ne Xt50-SE、Res Ne Xt50-ECA、Res Ne Xt50-SK,卷积空间注意力网络Res Ne Xt50-Simam,卷积混合注意力网络Res Ne Xt50-SPA、Res Ne Xt50-CBAM、Res Ne Xt50-sc SE、Res Ne Xt50-SE+Simam,并通过实验比较了非注意力网络Res Ne Xt50与卷积注意力网络,在Precision、Sensitivity、Specificity、F1 Score、二次加权Kappa系数Qks、Accuracy六个性能指标及对抗椒盐噪声、高斯噪声、梯度扰动性能上,卷积注意力网络优于Res Ne Xt50。最后,通过Grad-CAM方法绘制出各个模型识别眼底图像的热力图,热力图显示在关注眼底图像上,注意力网络比非注意力网络Res Ne Xt50更有效。(3)在研究自注意力机制对糖尿病视网膜病变等级识别中,本文提出使用依靠自注意力模块构建的纯注意力网络Vision Transformer对糖尿病视网膜病变进行等级识别,并通过实验比较了不同参数配置的Vision Transformer模型Vi T-B-16、Vi T-B-32、Vi TL-16、Vi T-L-32与卷积注意力网络,在Precision、Sensitivity、Specificity、F1 Score、二次加权Kappa系数Qks、Accuracy六个性能指标及对抗椒盐噪声干扰、梯度扰动性能上,Vi T-B-16、Vi T-B-32、Vi T-L-16、Vi T-L-32优于卷积注意力网络,而在对抗高斯噪声干扰性能上弱于卷积注意力网络。两种网络识别眼底图像的热力图显示了Vision Transformer模型对眼底图像的关注方式更细致、更周密。最后,将本文的卷积注意力网络和Vision Transformer与其他研究者的工作进行比较,发现本文网络模型在不同的指标上不同程度的胜出。通过一系列实验及比较表明,注意力机制在糖尿病视网膜病变识别上具有优越性和研究潜力。
其他文献
中黑盲蝽Adelphocoris suturalis是一种重要的农业害虫,主要危害棉花、果树和牧草等作物。实验室前期研究发现脂肪酰辅酶A还原酶(FAR)在中黑盲蝽的生殖发育过程中发挥作用。昆虫激素是调控昆虫生殖的主要因素之一,然而中黑盲蝽激素通路与生殖调控的关系尚不清楚。因此本研究运用基因克隆、基因沉默(RNAi)、实时荧光定量PCR(q PCR)等技术,明确保幼激素(JH)受体Met、Tai和及
学位
根据普华永道发布的《2021年中国企业并购市场回顾与2022年前瞻》,2021年并购数量再创新高,为12790宗,同比上一年增长21%。但许多并购并未实现预期效果,为助力企业合理运用连续并购的扩张方式,本文选择电子元器件行业的领头羊—立讯精密,作为案例公司,提出问题:(1)公司连续并购的动因是什么?(2)连续并购是否显著改善长短期绩效?截止至2020年,立讯精密市值达4000多亿,创造利润的会计主
学位
青光眼是一种不可逆的致盲性眼病,是导致失明的重要原因。青光眼确诊以后,临床上通常需要借助房角镜观察前房角(Anterior Chamber Angle,ACA)的内部结构以确定前房角等级,进而制定有针对性的治疗方案。目前,前房角的分级主要由医生人工判定,这主要存在以下问题:(1)诊断结论对医生个人经验和状态依赖较高,缺乏稳定性和一致性;(2)医生工作负荷高,诊疗效率低;(3)眼科专家资源有限且地区
学位
番茄是我国农业中重要的蔬菜之一。青枯病是番茄种植过程中经常出现的土传细菌病害,寄主范围广泛,传播速度快,对番茄产生的危害大,难以防治。青枯菌(Ralstonia solanacearum)Ⅲ型分泌系统是产生致病性的关键毒性因子,相关的效应蛋白可以抑制植物的先天免疫或调控寄主生理代谢,对于细菌的致病过程非常重要,因此研究青枯菌效应蛋白的作用机制有重要意义。本论文针对青枯菌效应蛋白RipAW的生物功能
学位
水稻(Oryza sativa L.)是一种重要的粮食作物。拟禾本科根结线虫(Meloidogyne graminicola)是水稻生产中危害较为严重的病原物之一,严重制约我国水稻种植业的发展及粮食安全。拟禾本科根结线虫在侵染寄主植物时会通过口针分泌效应蛋白。实验室前期对三个线虫互作体系的不同发育阶段进行转录组测序,本研究对RNASeq的数据进行分析,初步筛选7个差异表达的M.graminicol
学位
农药是重要的农业生产资料,但其不科学不合理的使用导致害虫抗性进化迅速,对害虫的抗性治理成为农业生产中的难点。利用RNAi技术沉默昆虫解毒酶系相关基因可降低其对杀虫剂的代谢抗性,利用纳米载体共同递送用于抗性基因RNAi的dsRNA和农药分子可作为抗性治理的潜在工具。介孔有机二氧化硅(Mesoporous organosilica nanoparticls,MON)是一类具有高比表面积、易进行修饰的纳
学位
龟纹瓢虫是农田生态系统中重要的捕食性天敌。长期以来农田病虫草害的防控总体上以化学防治为主,频繁的使用农药虽然控制了病虫草的危害,但也可对农田天敌昆虫种群构成威胁。目前,绝大多数有关农药对天敌昆虫安全性评估的研究常以杀虫剂为研究对象,但是田间实际使用的农药种类不仅有杀虫剂,如除草剂、杀菌剂、植物生长调节剂等农药,它们对天敌昆虫的潜在威胁尚不清楚。本文利用实验动物学、实时荧光定量PCR技术、16S r
学位
昆虫的生殖对于维持昆虫种群至关重要,其中,雌性昆虫的生殖调控机制一直都是昆虫学领域内的研究热点。过去的研究表明,不同昆虫的生殖调控机制存在很大差异,而目前只在模式昆虫中有较系统的研究。MAPK(mitogen-activated protein kinase)信号途径是进化过程中高度保守的胞内信号转导途径,对于哺乳动物的生殖发育具有重要作用,然而在昆虫雌性生殖调控中的作用尚不清楚。因此,本研究以十
学位
甘蓝型油菜(Brassica napus L.)是世界栽培面积第二大的油料作物,提高产量是其主要的育种目标之一。增加种子的大小(千粒重)是提高油菜产量的一条重要途径,但甘蓝型油菜大粒种质资源比较有限,已克隆的具有调控种子大小功能的基因则更少,大大限制了油菜千粒重改良的效率。在同属于芸薹属的模式生物拟南芥中,已经挖掘了一大批种子大小相关的功能基因,并已建立较为完善的种子大小调控的分子网络,为甘蓝型油
学位
唑类杀菌剂由于其广谱、高效等特点,在农业生产过程中已被应用于多种病害的防治。但是,如果不科学不合理使用,环境中残留的农药会对人类健康和生态环境造成潜在危害。因此,去除环境中残留的唑类杀菌剂至关重要。本研究论文基于金属有机骨架(MOFs),自主合成四种新型磁性MOF复合吸附材料,并围绕这些材料成功建立了环境水中唑类杀菌剂残留的去除方法。首先,利用SEM、TEM、FT-IR、VSM和XRD等技术对这些
学位