基于隐马尔可夫模型的多真值发现研究

来源 :中南财经政法大学 | 被引量 : 0次 | 上传用户:cxqr520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网是人类获取数据的重要来源,因此,如何从互联网上的海量数据中获取准确可用的数据,成为了一个研究热点,信息集成、问答系统、知识发现等都与互联网的信息获取技术息息相关。随着人类社会进入互联网时代,人类在互联网上留下了包括社交、购物、交易、娱乐等多种多样的数据,数据的获得显得简单而便捷。但是,数据的爆炸式增长也为信息的获取增加了难度,在大量的数据中筛选出有价值的信息是一件费时费力的事情。同时,由于互联网上的数据来源很多,不可避免的存在有一部分的数据源在提供信息时有错误、遗漏或者是过期的情况,因而对于同一对象的描述并不能保证完全一致,这也使得对数据的利用较为困惑。在Deep Web方面,很多数据提供商均会提供对同一对象的描述,并且均存在一定程度的加工,如何挖掘数据中的真值是个值得研究的问题。在大数据时代,数据是极有价值的东西,如何利用数据始终是一个热门的话题,而怎样保证数据正确性,并消除数据间的不一致导致的歧义,则是数据在使用过程中至为关键的问题。图模型与真值发现问题的研究已经经历了很长时间的发展,将图模型合理应用于真值发现中将有助于模型结果的优化,得到较好的真值预测效果。本文进行了基于图模型的真值发现问题研究,借助网络爬虫抓取了包括豆瓣、孔夫子、有路网、中国图书网等网站上的书籍信息,构建了基于图模型的多真值发现算法,并通过实验验证了本文算法的有效性。本文的创新点概括如下:1.提出了多真值发现中一种初始真值的确定方法CVote,该方法基于传统的投票法,改进投票法在多真值发现应用中的限制,有效提升后续真值发现计算的准确度。2.构建了基于图的真值发现模型,并确定了值之间的支持度计算方法,提出了基于图模型的真值发现算法GraphTD。3.将本文提出的理论模型实现,并在书籍作者数据集上进行试验,证明了本文方法的有效性,对比实验也表明,初始真值的选择对最终真值的计算存在一定的影响。本文基于图模型构建了书籍作者数据集上的真值发现算法,借鉴隐马尔科夫模型的转移概率得到了冲突数据源中数据描述的可信度转移矩阵,根据转移矩阵计算了数据描述值的为真的概率的收敛值。同时提出了一种多真值发现算法中初始真值的确定方法CVote,改进了投票发在多真值发现应用中的不足。本文在书籍作者数据集上实现了所提出的真值发现模型并与现有研究中的模型进行对比,证明了本文方法的有效性,为真值计算提供了又一种可选思路。
其他文献
超硬材料是指硬度达到40 GPa以上的材料,主要包括金刚石和立方氮化硼。超硬材料和树脂结合剂组成超硬树脂磨具,广泛应用于汽车工业、石油钻探、建筑工程、机械加工、仪器仪表
随着全球价值链分工体系的逐渐形成,中间品贸易在全球贸易的比重越来越高,尤其对于发展中国家,中间品贸易已成为国际贸易领域重要研究方向之一。另外,全球化加速了技术革新和技术扩散的步伐,由于世界上大多数的研发活动仅发生在少数工业化国家,大部分国家国内生产率增长主要依靠国外技术扩散。因此,考察中间品进口的技术溢出效应并测算其大小显得尤为重要。本文以“一带一路”发展战略作为研究背景,假定一国的经济增长不仅取
2019年5月以来,《学习时报》连载了《习近平在厦门》《习近平在宁德》《习近平在福州》系列采访实录。2020年6月起,又推出了《习近平在福建》采访实录,以讲述者口述记录的形
高通量连铸连轧工艺是将熔融状态的铝合金液由连铸机铸成厚度约19mm的连铸板坯,然后直接进行三连轧的连续铸造加工工艺,该工艺具有流程短,能耗低,生产效率高等优点。该工艺的
碳纳米管的电子结构拥有特殊的离域π电子体系,化学改性或掺杂可以调变碳纳米管自身的电子结构,使其展现出不同的电子特性。因这些独特且可调的电子特性,碳纳米管作为催化剂
随着多媒体技术的快速发展,包括数码相机在内的数字图像获取设备得到越来越普遍的使用。数字图像是一种信息载体,在人们日常生活和互联网各个领域中,发挥着重要的作用。同时,
互联网股权众筹模式是融资者以股权为交易对象,借助互联网平台向社会公众发布融资项目从而获取资金的新型筹资模式。随着“天使汇”“大家投”“人人投”等股权众筹平台的相
莘庄钩针编结,是以钩针为主要工具、纱线为主要材料,使用相应技法就可编结出织物的手工技艺。与其他手工艺相比,虽然其发展历史只有一百多年,但通过手工艺人的努力,编结技艺
在2001年,Sharpless等人提出了“点击”化学的概念,以铜(Ⅰ)催化的叠氮-炔烃环加成反应(CuAAC)为代表的点击反应在材料制备、有机合成和工业生产等方面得到了广泛应用。2014
高压辊磨机是以层压粉碎理论为基础研制的破碎设备,其施力方式以层压粉碎为主、磨剥为辅。高压辊磨机相比普通的圆锥破碎机、颚式破碎机等传统破碎设备,具有增产降耗、提升矿