基于深度学习的生物医学文本中的化合物-蛋白质互作关系抽取

来源 :华中农业大学 | 被引量 : 0次 | 上传用户:CoolSky_BO
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大量的化合物-蛋白质互作(Chemical-protein interaction,CPI)关系隐藏在生物医学文献中,这些生物实体之间的关系对药物发现、临床医学和结构化生物医学数据库的构建起到重要作用。然而手工提取CPI既昂贵又费时,因此应用自然语言处理(Natural language processing,NLP)技术从生物医学文献中自动提取CPI关系是一项重要且有应用价值的任务,并且此项研究仍有较大的改进空间。首先,本文选取了NLP领域中三个具有代表性的预训练语言模型Word2Vec、ELMo和BERT,通过实验比较了它们在CPI任务中的表现。针对生物医学文本关系抽取普遍存在的语料较少的问题,本文以这些已在外部大型语料库上预训练的语言模型为基础,用CPI任务语料对其进行微调(Fine-tuning)以获得更好的文本特征表示。通过比较预训练语言模型Word2Vec、ELMo和BERT对CPI任务性能的影响,发现预训练的BERT经过微调后能大幅度提高CPI关系抽取性能。然后,本文提出了一种新的基于神经网络的多分类模型,该模型综合利用文本语义和句法信息进行CPI关系抽取。一方面,先在Chem Prot语料库上微调预训练的BERT模型,来学习语料中句子的深层上下文表示。接着将得到的上下文表示输入到双向长短记忆神经网络(Bi-directional long short-term memory neural network,BiLSTM),结合多头注意力机制,对文本编码实体对语义特征。另一方面,获取句子中实体对的最短依存路径(Shortest dependency path,SDP),将SDP上的单词序列作为卷积神经网络(Convolutional neural network,CNN)模型的输入,以此学习实体对的句法特征。最终将语义和句法特征结合获得样本深层特征,用分类函数实现CPI关系的预测。在Chem Prot语料库上的实验表明,本文提出的模型获得了0.773的F1值,显著高于现有的最先进方法。最后,本文设计并实现了交互式的CPI关系抽取系统,并提供了Web访问。该系统可以检索在Pub Med中存在的包含指定化合物-蛋白质实体对的文献,还可以预测实体对的CPI关系类型,为相关科研人员的数据处理工作提供了方便。
其他文献
雷电作为自然界中的一种自然现象,发生时会向周围释放出大量的雷电电磁脉冲(LEMP),给电子设备的正常运行造成巨大威胁。雷电是联合国国际减灾十年委员会公布的“最严重的十大自然灾害”之一,《1998-2012年全国重大雷电灾害事例汇编》显示,在很多地区,电子设备受损案例占到雷电灾害总比例超过一半。近年来,为了应对随着私家车数量增多带来的道路拥挤的现象,公共交通越来越受到人们重视。作为城市交通的重要组成
学位
温度是一种重要的环境刺激信号,其对生物体的生理生化有着强烈的影响。生物体通过行为或生理改变实现对温度刺激的正确应答。以往的研究表明神经系统采取不同的环路和分子响应温度的变化。秀丽隐杆线虫(Caenorhabditis elegans,C.elegans,以下简称线虫)以其精巧的神经网络结构、超高的温度分辨率、以及对培养温度的趋化性行为成为研究温度刺激输入——行为输出的理想动物模型。线虫对升温刺激的
学位
单倍体诱导技术是种业产业前沿技术,可以极大提高育种效率。自1959年发现的玉米Stock6株系具有单倍体诱导能力以来,不同Stock6及其衍生的单倍体诱导系陆续被开发并用于生产,大大加快了选育符合生产和社会需求的玉米品系的步伐。但是大部分作物仍然缺乏产业可用的单倍体诱导系。2010年研究人员发现在拟南芥中使用弱功能的Cen H3融合蛋白(GFP-tailswap)替换内源Cen H3时可以获得高效
学位
我国虽然地域辽阔,但水资源分布不均,每年部分地区时常有旱涝灾害事件的发生。旱涝灾害的发生会严重危害河道周围居民的生命安全和财产安全,甚至会对下游的城市建设带来灾害性的影响。因此,对河道水位的监测十分重要。科学技术在不断发展,水位监测系统也要基于先进的科学技术,提高现代化和自动化水平。目前我国河道水位监测方式相对落后,一般需要人工到现场测量、记录和上报,不仅需要相当大的人力,而且效率十分低,不能实现
学位
在空间环境中电磁波的传播会受到大气介质的影响,使电磁波会发生一系列反射、折射、散射和吸收等现象。在一定气象条件的影响下电磁波会有一部分陷获在大气层中,这部分电磁波的衰减较小且可以不受地球曲率影响,从而可以实现大气波导传播。大气波导发生时会导致雷达盲区的出现和雷达杂波的增强,当雷达以某种频率和小于临界角的某个仰角角度发射时既可以实现雷达的超视距探测还可以实现扩大雷达的探测范围。目前,在实现超视距探测
学位
2011年至今,Pseudorabies virus(PRV)变异毒株引起国内许多Bartha-K61免疫猪场频繁爆发伪狂犬病,相比经典PRV,变异毒株表现出更强的毒力和致病力,对我国养猪业造成了巨大经济损失。且PRV已显示出其在中国引起人类感染的能力,因此采取行动控制PRV的传播并最终实现该病的根除对养猪业和人类健康都具有重要意义。通过互联网+技术与伪狂犬病毒研究相结合,建立一个自主版权的PRV
学位
校园欺凌问题作为困扰青少年成长,影响青少年身心健康及社会和谐稳定的棘手问题,对青少年造成的负面影响是长期且持续的。校园欺凌问题存在人为因素和环境因素,同时更为关键的是人境互动问题,校园欺凌治理需要社会工作的专业力量介入。小组社会工作作为校园欺凌治理的一种策略和方法正在发挥积极正向的专业优势和干预效果。初中生校园欺凌治理的小组工作介入研究采用问卷调查、半结构访谈及参与式观察等研究方法,分析校园欺凌事
学位
在哺乳动物胚胎发育过程中,背部真皮细胞、骨骼肌细胞和棕色脂肪细胞都来源于一群相同的多潜能祖细胞,骨骼肌干细胞和棕色脂肪细胞在发育谱系中联系紧密并且能够互相转化。而棕色脂肪组织具有加快人体新陈代谢,以热量的形式消耗化学能的特点,在预防肥胖和糖尿病方面有重要作用。基于细胞疗法将成人肌肉细胞重编程为棕色脂肪细胞,能够为治疗Ⅱ型糖尿病及心血管疾病等肥胖并发症提供替代细胞来源,具有重要的临床应用潜力。PR结
学位
药用植物的培育和大规模种植在生物与医药领域更具有现实意义。借助物联网、深度学习等计算机技术来实现药用植物的自动化管理和种植是优化药用植物培育的有效思路。实际上,物联网这一概念自提出以来,便获得了各行业的广泛关注,这也为物联网在多领域发展提供了基础。在植株生长监测方面,物联网已经涵盖了越来越多的领域包括大棚种植、气候因素采集、气候预测等。物联网的发展也为药用植物种植领域在提高产量和增加产业效益上提供
学位
我国敬老院的发展是基于农村地区的“五保”政策,农村敬老院的主要支持者是政府,在政府的大力支持下敬老院得到快速发展。随着增多的老年人口,农村敬老院可以发挥很好的作用,但是由于农村基础差、发展慢,敬老院单靠政府的支持是远远不够的,农村敬老院的发展需要拓展思路,要全方位的融入社会力量,以促进农村敬老院的可持续发展。农村敬老院面对的主要人群是农村五保户群体,主要以国家财政作为基础,由于人口老龄化的压力,财
学位