面向服务的数据挖掘关键技术研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:fanfrong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
解决大规模分布异构数据挖掘问题,需要一种便于资源集成、提供高质量数据挖掘服务,并具有较高安全性和隐私保护性的框架模型。面向服务的体系结构(Service Oriented Architecture,SOA)、本体、WEB服务等新技术将为数据挖掘系统的开发提供更强大的技术支持。根据分布异构环境下数据挖掘的特点,综合利用SOA、本体、WEB服务等新技术,遵循以用户为中心的理念,提出了一种开放式的面向服务的数据挖掘系统框架――SODMA。该框架将数据挖掘的算法封装成WEB服务,利用异构数据集成本体和隐私保护策略本体实现应用域的隐私保护语义数据集成,利用以用户为中心的数据挖掘本体和数据挖掘服务质量评价本体帮助用户动态选择适用且高质量的数据挖掘服务(DMS),可在分布环境下为不同领域多层次用户提供高可用性、高性能、高质量、安全的数据挖掘服务。对于分布异构的数据挖掘,异构数据集成是数据预处理很关键的第一步。数据集成的模型需要有效的解决数据异构性、完整性、权限控制、集成范围限定等问题。在分析现有的数据仓库方式、中间件集成、基于本体的数据集成方法优缺点的基础上,借鉴已有的语义数据集成和隐私保护数据挖掘的研究成果,提出了一个基于智能体和本体的隐私保护语义数据集成模型,以解决应用域隐私保护数据挖掘数据预处理的问题。定义了隐私保护数据挖掘本体,数据集成采用全局视图(GAV)和局部视图(LAV)相结合的混合本体集成方法,隐私保护策略集成采用单本体的方法,同时利用模式模糊化和角色模糊化,以提高模型的隐私保护性。数据挖掘服务是涉及数据、计算、挖掘知识的复杂服务应用,用户需要具备非常全面的专业知识才能正确使用。现有的以系统为中心的设计中,数据挖掘解决方案特别重视算法和系统工程,而没有首先探讨最终用户将如何方便地使用新的数据挖掘技术,使系统难于操作和使用。有的系统利用数据挖掘本体和预测执行时间的方法来帮助用户选择正确并且高质量的数据挖掘服务,但是数据挖掘本体只是对数据挖掘的方法进行枚举,无法保证服务的质量。在分析和总结了前人对于数据挖掘技术和系统研究成果的基础上,结合数据挖掘应用的领域知识,遵循以用户为中心的设计理念,提出了以用户为中心的数据挖掘本体,一方面根据数据挖掘功能和挖掘对象来组织数据挖掘算法,另一方面根据应用领域知识为用户提供有效的数据挖掘应用解决方案,帮助不同领域多层次用户方便选择数据挖掘服务。此外还进一步讨论了基于本体描述语言(OWL)的数据挖掘本体实现。具体的数据挖掘算法和域应用解决方案是数据挖掘本体的实例,是用户应用的核心。研究了反洗钱领域数据挖掘应用解决方案实例,包括应用域的层次,若干基本的数据挖掘算法,数据挖掘应用解决方案和所用算法间的映射等。主要实现可疑交易甄别、交易网络分析和洗钱模式发现等数据挖掘应用,给出了可视化链接分析方法,可实现交互式可视化的交易网络分析,提出了基于图熵的链接发现算法,可有效地发现交易网络的关键节点,给出改进的基于Apriori的SLAGM频繁子图发现算法,用于交易网络的结构分析。用户可利用域数据集成本体提供的语义模型,在数据挖掘本体的指导下选择数据挖掘算法和应用解决方案以定义具体的数据挖掘任务。在用户需求获取完成以后,接下来就是要根据用户需求选择合适的数据挖掘服务执行,而大多数最终用户并不具备这样的专业知识。从方便用户的角度出发,系统需提供一套服务选择机制,来帮助用户选择高质量的数据挖掘服务。系统综合通用WEB服务的评价标准、数据挖掘领域的专用评价因子及用户评价反馈等多种因素及服务的动态性,给出了一个较全面的数据挖掘服务评价本体,讨论了服务质量的评价方法,给出了基于服务质量评价的动态数据挖掘服务选择方法,用户可根据数据挖掘服务评价本体的语义模型,输入质量约束条件,也可以调整评价因子权值,系统在满足用户约束条件的服务集中,通过计算出服务的综合质量值,挑选最适合的算法执行。基于上述成果,实现了一个外汇反洗钱领域的隐私保护数据集成和数据挖掘服务选择的原型系统,并总结了系统设计特点。
其他文献
目的:探讨早期干预对高危儿体格智能发育的临床效果。方法:选取2017年3月-2018年2月于本院治疗的高危儿50例,按随机数字表法分为对照组与研究组,每组25例。对照组给予常规基
目的:探讨基层HCH营养管理模式对早期糖尿病肾病转归的影响。方法:选取2017年1月-2018年1月于本院首次确诊早期糖尿病肾病120例患者,所有患者均给予基层HCH营养管理模式干预
目的:探讨早孕期超声筛查对胎儿结构异常的临床诊断价值。方法:选取2016年10月-2019年5月在本院行孕早期(11~13+6周)超声筛查孕妇1784例(胎儿1841例)的临床资料进行回顾性分
国内成品油管制价格低于国际价格,国内对成品油需求快速增长,鼓励了能源消耗型产业的过度发展。目前的石油与成品油定价机制已经不能适应国内石油行业发展的需要,加剧了供给的波
目的:探析心肌肌钙蛋白(cardiac troponin,cTn)联合动态心电图(dynamic electrocardiogram,DCG)在急诊胸痛疑似急性冠状动脉综合征(acute coronary syndrome,ACS)患者早期诊
随着我国汽车、农机、工程建筑机械、兵器、航空、航天、环保设备、机械基础件的重点发展,专业化生产协作优势越加明显,在工业较发达的地区热处理中小企业大量涌现.他们在激
目的探讨艾滋病患者的临床护理要点。方法回顾性分析2011年1月—2014年10月我院收治的40例艾滋病患者的临床护理资料。结果本组死亡5例,转入重症监护室4例、转院治疗1例,余均
目的:探讨运用个性化前庭康复训练治疗外周性眩晕的效果及对Berg平衡量表(Berg balance scale,BBS)和前庭症状指数(vestibular symptom index,VSI)评分的影响。方法:选取本院
文章通过对全国卷2017—2019年涉及"河流"的地理试题进行统计分析,发现具有频率高、分值高等特点。该部分试题融合生态文明等核心价值观,凸显了高考"立德树人"的要求;主要考