基于Web的实体概念知识提取方法研究与实现

来源 :北京大学 | 被引量 : 0次 | 上传用户:gege1232000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,工业界和学术界花费大量的精力来构建大型知识库(如Freebase、Yago、Probase等),因为这些知识库可以用来提升信息检索、问答系统、情感分析等任务的结果。互联网技术的发展,特别是搜索引擎技术和各种百科(如维基百科和百度百科)的兴起,为知识提取和文本挖掘技术提供了新的机遇。  在自动构建知识库的过程中,首先需要找到一个领域下实例(Instance)的列表,然后找到这个领域的属性(Attribute),最后找到这个领域下所有实例在所有属性下的属性值(Attribute Value)。此外每个命名实体和同一领域或者不同领域的命名实体之间可能会存在着联系。命名实体之间的这些联系也是知识库的重要组成部分。因此,一般而言在自动构建知识库过程中有以下几个子任务:概念实例提取(Concept Instance Extraction)、属性提取(Attribute Extraction)、属性值提取(Attribute Value Extraction)及关系提取(Relation Extraction)。  本文主要讨论概念实例提取、属性值提取和关系提取。  在概念实例提取方面,本文发现了网页中的深度并列标签,并把它用在概念实例提取任务中,提高了提取候选实例的效果,在候选实例评价的阶段本文建立一个模式链接图并使用PageRank对候选实例进行排序。本文方法在14个语义类上的结果超越了之前三个有影响力的方法。  在属性值提取方面,本文提出一个基于搜索引擎的属性值提取算法,本文从搜索引擎返回的网页摘要(Snippet)中提取属性值,首先利用一个基于规则的模块获取候选属性值,然后构造一个鲁棒性非常强的分类器利用搜索结果的标题和网页摘要中的特征进一步预测候选属性值。实验结果表明本文提出的属性值提取算法较之前的方法在提取效果上有一定的提升。  在关系提取方面,基于间接指导(Distant Supervision)的关系提取算法在今年的研究当中倍受关注,本文把基于间接指导的关系提取算法分解为关系实例的探测和关系分类两个模块,之前方法可以视为改进关系分类模块,这些方法对最终提取效果的提升并不明显。本文首先改进了关系实例的探测模块,提升了关系提取的效果。同时本文发现之前方法在关系分类阶段构造负例的方法会引入一些False Negative(错误的负例),影响算法的精度,本文提出一种新的构造负例的方法。本文还发现在关系分类模块中,一个分类器很难达到很高的精度,本文整合多个分类器让算法的效果得到进一步的提升。  
其他文献
自动文本摘要通过计算机技术完成对文本的分析,并能够自动生成摘要以及实现对内容的总结,能够帮助用户尽快获取可用信息,并有利于用户对自身兴趣的定位。对自动文本摘要的研究,在
随着计算机计算能力的迅猛发展,计算机所能处理问题的规模越来越大,提高计算的可信性和高效性已成为工业界和科学界的共同目标.符号计算可以得到问题的精确结果,但计算复杂度高;
多媒体技术和互联网的高速发展促使图像视频信息爆炸式增长。随着多媒体处理技术的不断发展,视频技术正朝着超高清和立体的方向发展。在过去的二三十年间,视频编码技术得到了广
软件产品结构是软件工程领域的一个研究热点。在软件的再开发、缺陷修复、新人进入、遗产软件维护等开发活动中,了解软件的产品结构都可以帮助提高开发效率和产品质量。但是,在
在影视制作的过程中,制作影视特效的目的就是把电影中难以表达的场景,呈现给观众。或从降低成本的角度考虑,在降低了成本的同时又能给观众带来较好的观影感受。对于包含大量人群
头部姿势估计是一个典型而复杂的模式识别问题,在人脸识别、虹膜识别、视线估计等研究领域有着广泛的应用前景,具有重要的学术研究价值。本文以Kinect传感器获取的RGB-D图像为
螺旋焊管广泛的应用于各种有关国计民生的重要环节,主要是用于石油、天然气的输送管线。我国螺旋焊管机组整体水平与国际先进企业相比,在数字化及生产自动控制方面还存在较大差
互联网技术的快速发展促进了经济与社会的发展,网上购物、娱乐与社交等互联网新兴事物的迅速普及为民众的现代生活提供了极大的便利。但与此同时,网络环境的复杂性和信息系统的
随着互联网技术的发展,网格将分布在广大地理区域上资源通过通讯技术连接起来,这样用户提交的原有的大型项目可以分割成多个独立的任务,可以在不同的网格资源上执行,并将执行的结
随着普适计算和物联网的发展,越来越多的新设备出现在实验室环境中,如RFID、智能传感器、PDU可编程电源控制器等。这些设备在实验室原有的设备(工作设备、环境调节设备、安防设