改进朴素贝叶斯算法在垃圾邮件过滤中的应用

来源 :重庆师范大学 | 被引量 : 0次 | 上传用户:quguangming
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
电子邮件伴随着互联网的发展越来越普及,但是电子邮件的可靠性与安全性引起人们的重视,因为各种垃圾邮件、钓鱼岛邮件、骚然邮件极大地影响了人们的生活。同时,根据我国不良网络不垃圾信息举报受理中心的统计,有一半以上的用户因为垃圾邮件而浪费掉了大量的时间、大量的资源信息,还有一半用户因为垃圾邮件遭受到了一定的经济损失。目前被人们认可的垃圾邮件过滤技术有:身份认证、行为模式识别、和白名单和关键字过滤技术等等之类的技术。与此同时,垃圾邮件的误判会给网民造成一定的经济损失与时间损失,加之很多人都不愿打开垃圾邮件这一过滤功能,而且垃圾邮件本身也携带各种病毒,或多或少给人们带来了一定的困惑。随着科学技术的发展,朴素贝叶斯分类算法已成为现在最流行的技术之一,正是因为传统朴素贝叶斯分类算法良好的邮件分类效果,受到了广大研究者的关注。但是朴素贝叶斯受到自身条件属性需得相互独立的限制,实际上很多样本却不符合属性条件间相互独立等要求导致分类准确率很低,为了提高垃圾邮件分类的准确性,本文提出了结合主动学习的K-近邻局部加权朴素贝叶斯算法,为的是能够在一定程度上提高邮件分类的精确度和效率。本文主要研究工作如下:(1)如果样本本身一旦错分,那么,在训练过程中不断地更新、迭代,会导致错误不断地累积,继而得到一个易误分的分类器。因此,本文采取结合主动学习的K-近邻局部加权朴素贝叶斯算法(K-Locally Weighted Naive Bayes,K-LWNB),即人工选取一些最具有价值的样本进行标注,以此来提高样本本身的准确性,从而降低分类器的误分率。其中K-近邻局部加权朴素贝叶斯算法对垃圾邮件分类,能够让垃圾邮件的分类效果相对于传统的朴素贝叶斯算法来说,能够更有效地提高邮件的分类准确率和精确度。(2)本文采用ham(正常邮件)和spam(垃圾邮件)作为数据样本集,同时将文本内容解析成词向量,去停用词并提取出关键特征词,继而检查细条并保证解析的正确性,同时计算出不同独立特征关键词的条件概率,然后判断是否属于垃圾邮件。
其他文献
极化码在无记忆信道中被证明是容量可达的,因此该码字在近年备受关注,并已成为5G eMMB场景控制信道的编码方案。通过对洪水置信度传播(Flooding Belief Propagation,FO-BP)译
目的:筛选前列腺癌(PCa)与正常前列腺组织之间差异表达的长链非编码RNA(lncRNA),选取lnc-MX1-1为研究对象,探讨lnc-MX1-1对前列腺癌细胞增殖、侵袭和转移能力的影响,并进一步
服务组合是一种广泛使用的服务复用方式,它可以使用户无需知道复合服务的结构,只需关心其接口和功能,从而有效降低了系统开发的复杂性。现有的服务组合方法中,详细设计的服务组合方法总是会缺少对运行环境的考虑,而针对应用运行的服务组合方法又往往缺少对业务的考虑。此外,服务的需求一般来自业务分析人员,他们对需求的理解存在片面、主观的因素,开发人员所得到的需求很有可能与现实的需求不相符。根据以上情况,针对现有的
刑事诉讼法和司法解释对非典型非法方法获取口供的合法性体现出刻意模糊的态度,使实务中缺乏对其直接裁判的依据。这体现了对侦讯利益的偏倚而未真确地将非典型非法口供视为应斟酌和裁量的对象,造成司法实践中非典型非法口供排除难的现状,折射出将口供与真实可靠性相联系就能够被接受而淡漠人权保障的理解误区。因此,应加强对被讯问者意志自由自愿性的关注。通过再认识口供自愿性原则背后的价值,以及西方法治国家运用口供自愿性
苏轼不仅文章盖世,功业丰伟,其文化人格亦自足千古。他的治国理念、民本情怀、坚强意志和兼容儒、释、道的豁达人生,都体现了中华民族优秀传统文化的包容性和开放性,代表着中
会议
检务公开作为司法领域机关为民服务的重要举措之一,是提高检察机关监督体系、规范司法行为、促进司法管理的重要组成部分。2018年最高人民检察院印发《全国检察机关智慧检务行动指南(2018-2020年)》,将“智慧检务”列入司法领域智能化发展战略,在推进检务智能化的基础上,提高司法领域信息公开和司法领域规范的强度。本论文利用检务公开领域的核心起诉书,通过大数据、人工智能及自然语言处理技术,设计以起诉书为
本文以纪录片《守望琼音》为对象,从三个部分去展现影片的选题来源、拍摄经历、剪辑过程以及笔者对于影片的一些思考。片中以琼剧背后的琼剧人为拍摄对象,记录他们在从事琼剧工作时的生活状态。反映琼剧在每况日下的当下,这群琼剧人是如何坚持自己,为琼剧而奉献。让人们看到,当下的琼剧绝不是一门博物馆艺术。同时,让更多人了解海南文化,了解琼剧这门地方戏曲,使琼剧得到更好的传承与发展。历史悠久的海南琼剧,至今已有36
随着云计算、虚拟化等互联网新兴技术的快速发展,基础设施即服务(IaaS,Infrastructure as a service)模式的云计算平台被各行业广泛应用。而目前较为主流的IaaS云平台(OpenStack、Eucalyptus等)主要是通过物理主机资源分配量统计以及其分布情况而非资源占用量对资源进行调度管理,无法满足云计算服务平台所需的高效性、动态性、可伸缩性,也无法准确预测云平台业务需求
贫僧是1985年初中毕业后到常州天宁禅寺礼上松下纯和尚出家、1990年求受具足戒。虽说也接受过中国佛学院栖霞山分院和南京大学、中国人民大学宗教专业的教育,但对唐诗、宋词
会议
神秘书写是二十世纪末中国当代文学创作的现象之一。叶广芩的小说立足于寻根与对现世的人文关怀,融合了传统和民间神秘文化与原始萨满万物有灵思想,溢出古朴又富哲学思辨的神秘气息。其小说的神秘性有赖于对家族、民族之根的寻找,表现出多种传统、地域神秘文化,很大程度上地将神秘书写锁定于传统文化中,同时她也受国外文化思潮的影响,使小说得到钻出传统文化框架的契机,适当地以虚构、隐喻、情感、诗性的方式追寻生存世界的非