基于规则化词分布特征的无监督特征选取算法

来源 :2007年全国网络与信息安全技术研讨会 | 被引量 : 0次 | 上传用户:erwewrasfrfa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
无监督的聚类算法在中文网络信息处理中有着广泛的应用。由于存在大量的中文词语,适当的特征提取算法,可以降低计算资源消耗,提高聚类质量。但当前使用的无监督特征选取算法需要采用较多的参数,特征提取的结果与参数和数据集相关,具有随机性和过拟合的缺点。本文提出了基于规则化的词分布的无监督特征提取算法,通过对不同的规则化算法和不同数据集的实验结果表明,此算法简单、有效、稳定和普适。实验验证了不同聚类结果评价方法具有相似的变化特性,LTC向量化算法的结果总是优于其它向量化算法。
其他文献
1492年,著名航海家、意大利人哥仑布,为了寻找到印度的新航路,带了三艘西班牙船,越过烟波浩渺的大西洋到达了美洲。哥仑布最先到达的,是西印度群岛的圣萨尔瓦多岛。到达的时
本文提出了服务生存性的概念,并在系统冗余前提下,提出动态配置原子组件来增强系统生存性方法;根据中心极限定理以及系统运行历史数据,获取原子组件生存性变化曲线,并结合系
会议
北京医学院附屬人民医院病案室,是今年一月间中央卫生部举行的授奖大会上受到奖励的五个先进医疗单位之一。病案室的同志們創造性地建立了一套科学管理病案的方法,为提高医
网络新概念的发现和识别是信息安全领域的一个基础技术,它可以网络热点信息挖掘等应用提供底层支持。通过合理地利用标引信息,算法在速度上可以满足网络海量信息的要求;为了
会议
本文提出了一种基于内容分析的作弊评论识别方法,该方法充分利用了作弊评论的多种重要特征。在Blog作弊评论识别的初步实验中,识别准确率达到93%,显示了该方法的有效性。和其
大花蕙兰是洋兰中健壮易养的兰花。耐寒性强,一般家庭即使无加温条件也能栽培。而且,大花蕙兰花期长,只要抓住栽培要点,就能让它很好地开出花朵,因而广受欢迎。大花蕙兰有大
已有基于内存的频繁模式发现算法需要的物理内存是语料规模的几倍甚至几十倍,本文提出一种大规模语料频繁模式快速发现算法,通过采用合适的策略将语料划分为若干子语料,对每
Blog作为一种新的网络传播方式,迅速兴起和发展,已经越来越受到用户的关注。因此,迫切需要找到一种自动将Blog网页区别于其它web页面的方法,以便针对Blog语料进行内容抽取、
近年来,乳腺癌治疗理念更加人性化、个体化。但以往谈论的个性化更多的是体现在分子分型基础上的内科治疗选择,化疗、内分泌治疗、靶向治疗、基因治疗的长足进步为此提供了良
本文通过对自然文本统计模型和特性的分析,指出隐藏消息后可能对文本统计特性带来的变化,并提出了基于AdaBoost的通用检测算法。文章抽取文本的5个基本统计特征量为分类特征,