信息检索中用户需求的概念分析研究

来源 :上海交通大学 | 被引量 : 8次 | 上传用户:ciedan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当今信息时代人们从海量信息中获取自己所要的信息已经成为日常生活和工作所需。目前信息检索系统只能提供给使用者有限的帮助,局限性在于检索准确率低下,即检索返回结果中大量不需要的信息给用户带来的不是帮助而是困扰,是一种噪声。问题的症结在于现有的检索系统采用布尔模型“与”、“或”运算这类“离散型”处理方式,从用户需求和文档中抽取出离散的关键词进行匹配,割断了关键词之间在语义概念上的联系,从而丧失了这些词表达主题思想在概念上的完整性,由此产生大量噪声。关注这一现象和问题是本文的应用背景及其研究起始点。问题的瓶颈首先不在于提高效率的算法上,首要关注点在于如何在整个检索过程中保证用户需求概念完整性(整体性)。因此至关重要的起步是探索如何用概念分析方法标引需求。标引的基本单位不再是纯属形式上的字串而是由汉语词汇所表示的概念及其关联关系构成的完整整体。本文研究汉语用户需求的概念分析及其标引,是概念检索系统及其创新思想的首要组成部分。本质上还原了用户的检索意图,刻画了概念之间的内在联系,旨在保证概念的完整性,直接影响检索性能和实效。与文档分析不同,需求分析的目的不仅是得出用户需求的一个完整的概念(图)表示,更重要的是能准确刻画用户脑海中检索需求所揭示的概念内涵特征。本文注重于用户需求实际现象研究,即实际需求所揭示的概念的分析及其表示形式的归纳,建立了一些探索性方法,处理受限需求分析问题,以期之后可能扩展到整个需求分析领域。本文研究工作是概念检索模型的重要组成部分,为需求概念语义分析提供了有价值的思路和方法。此外对于自然语言处理领域中的一些热点问题,如命名实体识别、语法调试、语义分析等研究有积极意义。本文的创新性有以下几方面:1.用户需求表达式分析充分体现汉语本体的特点,概念分析及其表示凸现了汉语命名实体直接表现概念内涵的特点,实体命名形式反映了概念直接耦合:实体类名加上凸现必要区分特征。概念语义分析有创新。2.选择汉语复合结构作为汉语词语表达式的核心结构,极大的优点在于能简洁扼要表征表达式的概念语义,并且其前瞻性在于适合于多语种翻译自动对齐时简化、省略形态变化,这是基于人类语言体系不同但认知概念可以相通的基本假设。3.提出了针对部分需求的概念模型。需求概念分析基于需求表达式本身的研究分析。本文基于大量真实需求实例分析,总结了需求分析的原则要点,以及需求概念类型。归纳了一部分需求中常见的属性名,用以标引概念之间关联理据。4.提出了一种全新的合一文法调试方法。方便地改造一个已有的基于合一文法的句法分析器,使之适用于新的领域,特别是针对需求表达式的分析。本文将一个合一文法建模成Kripke结构,通过模型检测的方法形式化验证。调试方法能够自动发现文法错误,从而大大降低调试的复杂度。5.针对需求中高频出现的复杂命名实体,提出了一种基于网络挖掘的命名实体识别方法。由此构建了一个两层的关键词形式需求原型分析系统。该系统先将需求表达式中分析出的概念匹配到概念框架图上,框架图反映了领域知识;再余下未匹配的需求概念附着到框架图上以构成最终的概念图。该系统较好地平衡了对于领域知识和通用知识的分析。6.提出了一种基于实例的问句形式需求的概念分析方法,该方法将一个问句的概念分析问题转化为一个机器翻译的问题,其中问句作为源语言,概念图作为目标语言。实际语料分析表明,即使实例集较小,该方法仍能取得较好结果。问句的相似度计算考虑了词汇语义和句法等多种信息,词汇的语义相似度计算采用了混合多种计算模型的集成方法。有利于句子相似度的计算并在现有常用评测集合上取得非常好结果。
其他文献
小艾泡网成瘾,经常会接收网友提供的或从网上下载的一些趣味小游戏,Flash动画及流行音乐之类的文件;但自从有一次接收并运行了一个捆绑有恶意程序的文件之后.就对所有从网上获取
<正>在中国,信息化已经成为驱动现代化的一股巨大力量,国家也把信息化上升为国家战略。信息化自然有多种层次,如果说有一种优先顺序的话,政务信息化恐怕至关重要,理应放在优
期刊
《语文新课标》指出:“语文是最重要的交际工具,是人类文化的重要组成部分.”要教会农村学生熟练地运用母语进行交际,最为基础的则是说话,这是与他人交流思想、表情达意的一个
如果我们离开位置.而忘记了注销系统,好友向你发送消息或邮件,以为你仍在线,但你不回应,则会显得不太礼貌.所以我们有必要让系统过一段时间自动注销:先从http://www.newhua.com/nerfri
现代教学理论与实践的研究成果表明,课堂教学必须突出“以人为本”,也就是在教学的全过程中要让学生积极主动地参与学习。而开故式的教学恰恰符合了这一教学改革的要求。
从1986年成立第一家股份制商业银行交通银行,到后来陆续成立的招商、深发、光大、广发、兴业等以地方性股份制银行,以及为加大滨海新区金融先行先试的金融支持成立的渤海银行
对于企业的发展来说,企业的激励机制和薪酬体系建设是人力资源管理体系中不可缺少的两个方面,这两方面的成熟度决定了企业的文化建设、经营状况和发展前景,集中反映出企业核心竞
回想新冠疫情期间,面对未可知长短的“寒假”,老师们心急如焚,该给孩子哪些引导和帮助,以便在疫情结束重回课堂后,教学能顺利开展?为此老师们使出了十八般武艺,录微课,传视频,开直播…
近日,中共中央办公厅、国务院办公厅印发《国家信息化发展战略纲要》,要求将信息化贯穿我国现代化进程始终,加快释放信息化发展的巨大潜能,以信息化驱动现代化,加快建设网络
期刊
不少用户不了解显卡与显示器分辨率之间的庆系.往往不正当设置显示器分辨率事实上.比较资深一点的玩家都知道.LCD显示器都有自己最适合的分辨率.这是LCD面板的物理结构所决定的.对