大规模文本聚类技术比较分析及在词义归纳中的应用

被引量 : 3次 | 上传用户:robbieqzl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
聚类是数据挖掘领域中的研究热点。随着Internet的发展,人们面对的信息与日膨胀,有效的组织无序的信息,生成结构化组织形式,使用户能够轻松的找到自己需要的信息成为聚类发展的无限动力。将文本聚类,自动组织文本需要经过文本预处理,聚类,然后根据需要对聚类结果给出评价。涉及到的关键技术有空间向量模型(VSM),聚类分析算法,聚类结果评价方法等。目前大多数文本聚类的研究仅给出一种聚类算法及其改进算法在文本数据上的性能比较和分析。没有一份在同一数据平台上各种不同聚类算法的对比分析报告,没有详细的关于基于不同思想的聚类分析算法的优缺点的说明。本文详细的分析和比较了基于划分的方法、层次聚类方法、基于密度的聚类方法在同一数据集上的性能,说明了不同聚类算法适合的数据分布,弥补了这一空白。对于大部分聚类算法并不适合大规模的数据集,有些算法在大规模数据集上甚至不能运行,如凝聚层次聚类。而Internet的发展给文本聚类带来大规模的挑战。本文最后提出了一种可以用于大规模数据的文本聚类算法。算法在没有降低性能的基础上大大提高了算法的效率。文本聚类算法在许多任务中有广泛的应用,如词义归纳。词义归纳就是自动地发现给定歧义词的词义集合。本文的最后,详细说明了文本聚类算法在词义归纳任务中的应用。
其他文献
随着人工晶体设计和制造工艺的改进以及手术技术的不断完善和提高,人工晶体手术相关并发症已逐渐减少,但仍然存在着影响手术患者预后的风险因素。通过介绍人工晶体常见的不良事
目的:甲状腺乳头状癌极易转移至颈部淋巴结,目前,国内外关于甲状腺癌颈部淋巴结转移特点的研究较少,而与临床病理特征之间的关系研究更少,特别是在临床颈部淋巴结阴性的患者中是否
黑龙江省是我国的农业大省,是我国的北大粮仓,作为黑龙江省区域内的优势产业和主要产业的农业生产,其农业产业链存在较严重的问题。综观黑龙江省农业主要的农业产业链,尤其是农业
<正> 医学心理学是心理学与医学相结合的新学科,研究心理因素在人体健康与疾病及其互相转化过程中的作用规律。心理卫生和医务人员心理素质也是医学心理学关注的学科。在医学
随着汽车行业高速的发展,国内的汽车数量迅速增加,由汽车产生的噪声已经成为城市重要的污染,汽车的振动噪声强度过大,会对乘坐舒适性、驾驶员及乘客的健康造成,以及行驶安全性带来
“和合”是中国思想文化中被普遍接受和广泛认同的人文精神,它不仅贯穿于整个中国思想文化发展的全过程,而且深厚地积淀于各个时代思想文化中。把中国传统“和合”思想运用到对
目的:研究抚顺市区餐饮业的食品安全状况及影响因素,进而提出预防措施和建议。为提高抚顺市区餐饮服务单位食品安全整体状况,降低食品安全隐患,提高抚顺市区食品安全监管部门的监
近年来,国内舞弊事件发生日益普遍,性质日渐恶劣,对企业、社会造成的危害也日趋严重。与此同时,IT和网络技术迅猛发展、网络财务报告在越来越多的企业和组织中得到普及。这些变化
在Na3PO4电解液中于恒流条件下对Ti6Al4V合金进行了微弧氧化处理,考察了氧化时间对微弧氧化膜表面形貌、生长速率、表面硬度和相组成的影响,并对不同氧化时间所得微弧氧化膜
在当今社会,人们极大的开发和利用化石燃料资源,整个世界经济的发展都是建立在石油和煤炭等化石资源的过度消耗上。由于煤炭和石油等是不可再生资源,因此可再生资源就进入了人们