论文部分内容阅读
在最大匹配法（The Maximum Matching Method）的基础上，提出了一种回溯正向匹配（The Backtracking Matching Method）的中文分词方法。该方法首先对待切文本进行预处理，将文本分割成长度较短的细粒度文本；利用正向匹配、回溯匹配和尾词匹配来有效发现歧义字段；利用长词优先兼顾2词簇的方式对交集型歧义字段进行切分。最后对该算法进行的定性分析说明了该方法的先进性，从随机抽取大量语料实验结果上证明了该方法的有效性。