基于词向量学习的关键词提取算法研究

来源 :中国民航大学 | 被引量 : 2次 | 上传用户:chchone
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
关键词是文本主题信息的精炼,可帮助人们快速获得文章的核心内容,并被广泛应用于信息检索、问答系统、文本分类等领域。传统基于图的关键词提取方法,仅考虑到词在共现词图中的全局结构信息,忽略了词在序列中的潜在语义信息。现有研究表明词向量学习技术可以有效捕获词在序列中的潜在语义信息。故本研究主要聚焦于:在基于图的关键词提取方法中融合词向量,以及提出面向关键词提取的词向量学习模型。具体工作包括:利用通用的词向量模型学习词向量,并融合其与词在文档中的位置信息来改进基于图的关键词提取算法。针对现有基于图的关键词提取方法忽略了词在序列中的潜在语义信息的不足,该方法将包含了词在序列中潜在语义的词向量,与词在文档中的位置信息相结合,改进PageRank算法来为单词更加合理地评分,从而提高关键词提取的效果。实验分别使用Skip-gram,TWE-1和fastText三个通用的词向量模型来学习词向量,并与5个无监督的关键词提取方法做对比。实验结果表明,我们提出的融合词向量和位置信息的关键词的图提取算法在所有评估指标上均优于PositionRank方法的结果。提出面向关键词提取的词向量学习模型,并将其应用到基于图的关键词提取方法中。针对通用的词向量学习模型未能有效整合词的文本特征的不足,提出了面向关键词提取的词向量学习模型。该词向量学习模型首先根据文本内容及其主题信息构建异构文本图;然后在这个异构文本图上嵌入训练;最后得到每个单词的词向量。基于图的关键词提取方法融合学到的词向量来为单词更好地评分。另外,针对短语评分方法未能有效利用词之间的相关性进行评分的不足,提出基于词向量的短语评分方法,使用单词在向量空间下的距离为短语更加合理地打分。与8个无监督的关键词提取方法对比的实验结果表明,提出的关键词提取算法能够更好地为单词和短语打分,从而提高关键词提取的效果。
其他文献
江城大道项目是宜昌市完善城区“五纵十横”快速路网的重点工程,项目的建设实施对于宜昌市完善城市功能、加快宜昌市的开发建设进而实现“十三五”规划所确定的城市建设目标
目的了解有血液学异常的HIV感染患者的血细胞形态特点。方法分析16例有血液学异常HIV感染患者的外周血、骨髓细胞学和骨髓病理学特点。结果患者外周血可表现1~3系血细胞减少,
在深化教育改革、提倡创新的大背景下,3d打印这门新兴学科已经开始进入中学课堂。面对这样一门全新的课程,课程设计还处于探索阶段。文章介绍了什么是3d打印,探讨了3d打印课
[目的]探讨阿奇霉素联合香砂六君子汤对糖尿病胃轻瘫(DGP)患者血清胃动素(MTL)和生长抑素(SS)水平的影响及疗效观察。[方法]将78例DGP患者随机分为中西医组和西医组各39例。2
随着经济的发展,营运资金对企业的财务管理的作用日益显著。企业的财务状况的真实性都离不开营运资金的积极作用,财务管理人员要善于从发展的角度挖掘营运资金的作用,为企业
目的:观察膝骨关节炎(Knee Osteoarthritis,KOA)的中医体质类型分布情况,研究体质与症状体征的差异与联系,为在“治未病”理念指导下针对不同体质患者开展KOA早期防治提供指
采用电感耦合等离子体发射光谱法、火焰原子吸收法测定水中的铁、锰,优化了测定条件。结果表明,两种方法检Ⅲ限均较低,准确度高,精密度好,具有很强的可比性。
人力资源,作为现代公司经营管理的重要概念和主要资源,其核心的人才是现代企业健康可持续发展的核心。在新时代的今天,打造一个完备的人才结构,是一个企业发展的关键。但随之
从人性的角度来看,贾宝玉是一个自由放任,不走封建统治者所要求的仕途经济老路的逆子。在封建伦理根深蒂固的情况下,贾宝玉接受来自四面八方的批判乃至压迫,同时也出现了促进
关于如何利用二氧化碳作为初始碳源来制备具有更高价值的甲醇研究一直以来是能源研究的前沿课题,我们如果能够把空气中的二氧化碳气体进行捕获然后将其和氢气进行反应生成甲