【摘 要】
:
在自然语言处理中对于标点符号的研究越来越重视,其中,逗号在汉语及大多数外语中都是使用频率最高的标点符号。逗号的用途广泛、用法灵活,因此很难掌握。本文主要对中文逗号在句
论文部分内容阅读
在自然语言处理中对于标点符号的研究越来越重视,其中,逗号在汉语及大多数外语中都是使用频率最高的标点符号。逗号的用途广泛、用法灵活,因此很难掌握。本文主要对中文逗号在句子中的作用进行了研究,重点研究了逗号在中文分句和基本语篇单元识别中的分类方法。具体的研究内容归纳如下:(1)对CTB6.0(Penn Chinese Treebank)的语料进行了详细的统计和分析,归纳总结了两种逗号分类的标准。分类标准之一是将逗号视为句子的边界,将逗号分成两类:可以分句的逗号EOS(End Of a Sentence)和不可以分句的逗号Non-EOS(Notthe End Of a Sentence)。另一种分类标准是将逗号分为七类,并将其视为基本语篇单元边界的同时标记逗号分隔单元之间的关系。(2)提出了一个基于层次结构的中文分句方法。该方法首先根据各种有效句法的特征对逗号进行第一层分类;在此基础上,对第一层分类器中可信度低的样本利用新的特征进行第二层分类。实验证明基于层次结构的中文分句识别方法取得了良好的效果。(3)提出了基于逗号的中文基本语篇单元识别及其优化方法。首先,研究了用于基本语篇单元识别的有效句法特征,并分别用最大熵模型和条件随机域模型进行识别。其次,进一步从以上2个分类器中捕获全局与局部特征,用序列化和统计相结合的方法来提高基本语篇单元识别的性能。实验表明,本文提出的方法提高了系统的性能。本文提出了一种基于逗号的中文分句和基本语篇单元识别方法,实验证明了该方法的有效性,将有益于基于篇章知识的自然语言处理技术的发展。
其他文献
高校辅导员是高等学校从事德育教育的核心,是大学生成长过程中的良师益友,在大学生思想政治教育中扮演着重要的角色。高校辅导员队素质的全面提高对大学生的心里健康起着关键
<正>糖尿病患者由于神经血管病变,导致下肢感觉异常,反应迟钝,供血不足而极易发生下肢溃疡,导致糖尿病足[1]。糖尿病足患者要积极治疗,通过补液、抗感染、活血化瘀、促进神经
目的探讨还原型谷胱甘肽、生脉注射液联合丹参注射液治疗酒精性肝硬化的临床效果。方法选取2013年1月—2014年8月华鑫骨科医院收治的酒精性肝硬化患者41例,将患者随机分为治
本文系统阐述了马相伯关于宗教价值功能、宗教与科学复杂关系的真知卓见 ,并追溯其反对西方文化殖民主义、力谋天主教中国化的可贵探索 ,以期为今人树立理性的宗教文化观 ,提
本文以长沙近现代历史文化遗产中的不可移动文物作为论述的重点,通过对以文物保护单位为代表的长沙近现代文化遗产产生的历史背景进行纵向追溯,挖掘其历史渊源,同时通过对建
风能是一种不产生任何污染的可再生能源,是当前经济和技术上最具商业化规模开发条件的新能源。我国可开发利用的风能资源约为10亿kW,其中,可开发和利用的海上风能约7.5亿kW,
中国传统法律文化中的亲属容隐制度被称为“亲亲得相首匿”、“同居相为隐”,具体是指亲属之间对犯罪行为可以相互隐匿包庇而不构成犯罪或减轻甚至免除处罚,其精神实质是“屈法
中国作为传统的农业大国,在社会主义新农村建设中,随着市场经济体制的不断深化,出现了很多新的问题和矛盾,如千变万化的大市场和小农户的分散生产经营方式之间的矛盾。如何有
自选长拳属于技能主导类表现难美性项群,主要是表现出动作的高、难、美。而自选长拳A级跳跃难度动作是竞技武术难度动作的基础,是竞技武术爱好者必修课。从初级武术比赛实践
本文致力于刑事被害人救助制度的构建与完善,通过立足我国国情,对我国目前刑事被害人救助工作的开展情况进行现实考量和审慎思考,借鉴境外主要国家和地区的刑事被害人救助制