【摘 要】
:
大数据是最近一年来非常火热的概念,随着人类产生和收集的数据量的爆炸式增长,对数据的存储和分析能力有了更高的要求。建设基于数据仓库的,特别是Hadoop的Web查询平台,是提
论文部分内容阅读
大数据是最近一年来非常火热的概念,随着人类产生和收集的数据量的爆炸式增长,对数据的存储和分析能力有了更高的要求。建设基于数据仓库的,特别是Hadoop的Web查询平台,是提高企业数据存储分析能力的有效方案。本文针对某公司快速发展中面临的数据处理能力不足的问题,介绍了建设基于Hadoop的Web查询平台的必要性,分析了查询平台要实现的需求和所选择的技术架构,并重点介绍了其中的权限控制和性能优化模块。本论文的主要工作有以下两个方面:首先,对企业现有数据平台进行分析,总结其中的不足和企业数据存储分析的新需求,提出了基于Hadoop的Web查询平台设计方案。其次,设计并实现了平台中权限控制和性能优化模块,提出了细粒度的权限控制模型,其中包括Web页面的安全性、数据库对象级的安全性和元组级的细粒度安全性,并介绍了该模型的详细设计与具体实现,最后结合性能优化进行了分析。目前本文介绍的Web查询平台已经建设完成,投入线上使用。其中细粒度权限控制模型的应用,在数据仓库中实现了数据访问的行级控制,达到了保护Web查询平台用户数据安全的目的,杜绝数据外泄的可能。通过性能优化,降低数据仓库中查询语句的执行时间,提高了Web查询平台的可用性。
其他文献
“污染避难所”假说是当今国际经济学界一个颇受争议的热点问题。本文采用现代政治经济学方法,对这一假说涉及到的理论问题和实证方面进行了剖析,并初步建立起一个分析“污染
本文以脱毒型食源性致病菌Escherichia coli O157:H7为研究对象,研究了高压二氧化碳(high pressure carbon dioxide, HP CD)诱导E. coli进入亚致死状态以及亚致死细胞复苏现
受国务院新闻办公室三局委托,中国出版科学研究所就中国主题图书在主要发达国家出版情况做了专项课题研究,并完成了《中国主题图书在主要发达国家的出版情况概述》课题报告。
针对我国电力行业燃煤二氧化碳(CO2)排放清单不够完善以及排放量预测方法不够精确的问题,本研究利用全生命周期评价(life cycle assessment,LCA)的研究手段,改进CO2排放量计算方
港口资源整合、协同,对促进各类要素在大湾区便捷流动和优化配置,推动湾区城市群跨越式发展,具有重要的现实意义。以打造国际航运中心为目标,依托“政府主导+企业间局部股权
双丹类制剂由丹参和牡丹皮配伍组成,两者相须为用,具有活血散瘀、通络止痛的功效。现代药理学研究表明,双丹制剂在治疗心血管疾病方面发挥着重要作用,然而其疗效机制不甚清楚
随着知识经济的到来,多媒体技术叩开了学校的大门,作为一种全新的教与学的工具和手段,开始走进学校、课堂以及教学。将多媒体技术与生物教学进行有机结合,最终实现了多媒体技
文化公园是以城市文化特色为指导,城市文化公园的建设不仅能够改善城市生态环境,提高居民户外活动的空间,更能够塑造体现城市自身文化特色的文化环境。城市文化公园的景观设
十九世纪末,欧洲进入社会大变革时代,巨大的社会变革催生了人们对精神文化的新追求。在文学和艺术领域,人们开始强调灵感、创造力和更加自由地情感表达。这一时期出现了许多新的
从历时性视角来考察,课堂质量标准具有规律性;从共时性视角来审视,课堂质量标准具有多维性;从实践中把握,课堂质量标准具有生成性。规律性旨在揭示课堂标准的演化与发展是有