大数据环境下数据分析与可视化核心技术研究

来源 :北京邮电大学 | 被引量 : 2次 | 上传用户:duzhiwei1010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
步入信息社会以来,数据的爆炸式增长为信息处理与数据分析带来了新的机遇与挑战。IBM Watson指出,每天都产生约25亿GB的非结构化的原始数据,数据中的关键信息往往淹没在庞大的数据量以及复杂的结构之中。因此,需要对数据信息进行有效的过滤处理,其中,数据可视化分析技术是至关重要的部分。本文分析了当前数据可视化分析领域的主要方法和工具,发现当前的可视分析方案仍存在着一些值得探究的问题:人对于数据的认知特点决定了人在分析过程中具有一定的认知局限性,而单一的采用机器计算的方式进行数据分析存在目的性差的问题;在可视化分析过程中存在可视化模型选择困难的现实问题;一些可视化工具片面追求华丽的效果,而轻视了对数据关键信息进行传递的能力等。据此本课题完成了以下的研究与实践工作:1.本文从数据可视化分析的流程入手,结合传统探索式数据发现方法,提出了启发式数据可视化分析策略。该策略重视人对数据的认知特性,强调人机之间的互动与反馈,注重数据本身对可视化分析过程的指导性。2.文章重点论述了构建一个可视化数据分析平台的设计与实现过程。这个平台以B/S结构为基础,结合当前流行的D3.js可视化框架,实现了一个集数据属性分析、可视化模型推荐、动态可视化模型构建为一体的可视化分析应用。3.该平台实践了理论提出的启发式数据分析策略,并提出自动化可视分析图形推荐方法以及可视化模型编码推荐方法等两种可视分析新方法。系统功能简化了分析人员使用数据可视化分析方法的过程,提升了分析效率,并且能够得到更佳的可视化分析结果。本系统架构重视降低模块之间的耦合程度,提供了较强的可扩展性。以该平台的架构为基础,可以进一步实践启发式的数据可视化分析方法,并将系统扩展出更多的具体应用。此外,本系统还可以扩展可视化模型的种类、模型推荐算法等方面继续优化。
其他文献
美国批评家迪夫·希基是上世纪80年代以来西方审美回归思潮的引领者,也是以批判艺术界的学院主义和官僚主义、挞伐当代艺术体制和历史形式主义现代艺术理论、捍卫基于自由审
<正>个案急呈:申请人冯某系某商场信息管理员,因家中有事,向单位请了事假。在单位发工资时发现工资少了,而且还低于当地政府规定的最低工资标准,于是找到单位领导要求按最低
利用机载高光谱遥感数据(CASI/SASI),对甘肃北山成矿带金滩子-明金沟一带的蚀变矿物异常信息进行提取和分析,总结了区内蚀变矿物异常信息的分布规律及成因;结合典型岩石、矿
智能变电站是智能电网的重要组成部分,一体化监控系统是智能变电站自动化系统各种功能优化及辅助应用的高度集成。从智能变电站一体化监控系统构架出发,通过分析一体化监控系
椎管狭窄症是脊髓脊柱常见疾病,常与脊柱退行性病变、椎管内内容物病变或外伤等因素有关,发病有增多趋势,治疗技术也在不断发展。多节段受累时,多主张行后路手术治疗,后路手
建立了对洗发水中甘宝素含量进行测定的反相高效液相色谱法。采用CLC-ODS柱,以乙腈:水(65:35)为流动相,UV检测器,波长为270nm。在5-250(μg·ml-1)范围内线性关系良好,平均回
大蒜素是多种含硫化合物的复合体,蒜氨酸是大蒜素的前体物质,且其性质较稳定,大蒜素是由蒜氨酸被大蒜里的蒜酶催化产生。大蒜素具有杀菌消炎、降血脂、降血压和提高机体抵抗
<正> 治疗方药:煅龙骨、冰片、橡皮、轻粉、红升丹、藤黄按10:4:2:1:1:1/2成份组成。诸药研末,过120目筛,充分混合,用凡士林调膏备用。使用时,先将患处清洁消毒,然后外敷膏药
<正>他是一个富有创新开拓精神,具有强烈时代责任感的企业家。创业以来,面对复杂多变的市场环境和艰巨繁重的工作目标,他紧紧抢抓机遇,带领广大职工把企业发展壮大,以追求卓
目的:观察分阶段、渐进性的康复训练对I型骨性BanKart损伤肩关节镜修补后的恢复效果。方法:将33例肩关节I型骨性Bankart损伤行肩关节镜下单排锚钉修补术的患者分为对照组16例