【摘 要】
:
为了降低正向最大匹配分词算法的切分错误率,分析了产生这个错误率的原因,提出了一种改进的正向最大匹配分词算法,即增加一个交集型歧义字段处理模块。该方法对待切文本进行
【机 构】
:
上海理工大学光电信息与计算机工程学院
论文部分内容阅读
为了降低正向最大匹配分词算法的切分错误率,分析了产生这个错误率的原因,提出了一种改进的正向最大匹配分词算法,即增加一个交集型歧义字段处理模块。该方法对待切文本进行预处理,在传统正向最大匹配的过程中,调用交集型歧义字段处理模块,该模块主要是在每一次正向匹配后进行回溯匹配,即通过检测当前处理词条的尾字和下一字的成词情况,分别计算该尾字和不含该字的当前处理词条的互信息与尾字和下一字的互信息,通过比较两者的互信息大小来决定切分,最后对分词碎片进行了处理。通过对随机抽取的语料进行测试,结果表明该方法是有效的。
其他文献
鄂东长江公路大桥为主跨926 m混合梁斜拉桥,南索塔高236.5 m,分为下横梁和下塔柱、中塔柱和上塔柱4部分。简要介绍其施工控制的主要原理和方法,为同类结构施工控制提供参考。
目的探讨经阴道彩色超声检查在诊断早期未破裂宫外孕中的临床价值。方法回顾性分析77例宫外孕患者经阴道超声检查的超声特征并进行分析。结果经阴道超声诊断早期宫外孕77例,
1病例资料患者,男,75岁,1周前无明显诱因出现右侧肢体肿胀、疼痛,活动受限,局部皮温高,在当地诊所输液(具体药物不详)治疗后,症状无明显好转。2018年2月28日转入我院,门诊血
本文阐述了大学生择业观内涵和树立正确择业观的意义,分析了大学生择业现存在的问题,提出了教育大学生树立正确择业观的途径,以期帮助大学生养成正确的择业观。从而为大学生实现
鄂东长江公路大桥所用钢材为Q345qD钢,本文对不同板厚该钢的焊接性进行了初步分析.以及不同接头形式在不同焊接方法下的力学性能进行了试验,并列出了典型接头的试验结果,为焊接工
以酚醛树脂为基体,以经过表面预处理的剑麻纤维为增强材料,研制出新型无石棉摩擦材料,其各项性能均达到汽车制动器衬片GB5763—1998的规定,且与市场产品的摩擦磨损性能处于同一范
汽车行业的高速发展需要大量的高素质汽车维修人才,但通过调研发现大多数汽车维修企业都反映汽修专业应届毕业生的动手能力偏弱。螺栓拆装是汽车维修最基本的能力,这将影响企
智慧时代促进了高校信息检索服务的不断升级更新。通过分析现阶段高校图书馆信息检索服务面临的新挑战和存在的不足,提出树立自主服务理念与社会服务意识、多方合作强化资源
坚持党的领导是我国的根本政治原则,是我国长治久安的根本保证。检察独立是检察权行使的本质要求,是我国经济社会健康发展的内在需要。建立起独立的检察系统,实行党对检察系统的
从本质上看,电路网络与交通网络具有同一性,基于电路的交通网络仿真的方法可以较好地解决传统交通分配方法中的弊端,从而更加确切地反映实际情况,并可为交通网络分析和交通规