考虑隐私保护的HADOOP基本算法的设计与实现

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:yhb819
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在大数据时代下,为了追求数据处理的高效性和经济性,人们更多得把数据移交云平台,通过并行的方式来处理数据,而MapReduce就是其中最流行的一种并行编程模型。利用MapReduce模型高效处理常见的基本问题始终是研究热点之一。然而,云端处理数据存在信息泄露的安全隐患。因此,本文围绕三种常见的基本问题,数据库的多表连接,数据的分组和聚合以及矩阵计算,在已有的解决这类问题的面向MapReduce编程模型的算法基础上,设计并实现了新的算法来增加数据的隐私保护。本文假定数据被提交给具有诚实但好奇特性的云端服务器,(即服务器严格执行任务但尽可能得试图获知更多数据信息),并且用户被允许访问数据处理的结果。在此基础上,本文提出了两种安全概念:(1)Secure-Private(SP):云平台和用户在不能互相串通的前提下,云平台不能获知输入数据的真实信息或运算的结果,而用户不能获知除最后结果以外的信息。(2)Collis ion-Resistant-Secure-Private(CRSP):即使云平台和用户可以互相串通,即云平台知道用户的私钥,也保证云平台不能获知输入数据的真实信息或运算的结果,而用户也不能获知除最后结果以外的信息。对于数据分组和聚合问题,本文提出并实现了满足第一种安全的算法,而对于多表连接和矩阵乘积计算问题,本文提出并实现了分别满足两种安全概念的算法。此外,本文还针对矩阵的乘积计算,设计并实现了基于Strassen-Winograd算法的面向MapReduce的新算法以及分别满足两种安全概念的算法。本文使用主流的云平台之一的Hadoop对以上这些算法进行实际数据的测试,并从加密代价,交流代价和计算代价方面对这些结果进行分析比较。
其他文献
圆明园经历了兴建、鼎盛、被烧掠、荒废、被保护的历史,最终成为一个有着巨大影响力的遗址公园。本文从文化的视角,分析了圆明园遗址公园的文化价值转变,认为纪念性价值是圆
洛伦兹不变性是相对论和粒子物理标准模型的基础。作为狭义相对论的基本假设,洛伦兹不变性要求物理规律不随参考系变化而变化;洛伦兹不变性是粒子物理基本定理CPT定理的假设
Markov跳变系统因其能够模拟动态系统发生非预期变化而在近几十年内受到广泛关注。当前的绝大部分成果都是基于转移概率时不变情况。然而,现实应用中各种不利因素的存在,使得转移概率通常是时变的。另一方面,有限时间稳定性由于能够反映动态系统在有限时间内的暂态性能而在许多工程应用中起着关键作用,如机器人,无人机,生化反应等等。基于以上讨论,本论文主要围绕离散Markov跳变系统在时变转移概率条件下出现的测
纪检监察机关是执行党纪政纪的专门机关,是作风建设的积极参与者和有力监督者,纪检监察干部队伍的建设直接影响着党风廉政建设和反腐败工作的成效。习近平在十九届中央纪律检查委员会第二次全体会议上强调指出:纪检检察机关就是党内的“纪律部队”,就具备高度忠诚、高度自觉,并且勇于责任担当,才能肃清党内纪律,形成清明的党风党纪,而这一切的形成格力依赖于广大纪检监察干部。纪检监察干部肩负着党内权力不被滥用的重任,手
本文主要研究了双极非等熵Euler-Poisson方程组的大时间渐近行为以及该模型光滑解的松弛时间极限.此模型是由Euler方程以及Poisson方程耦合而成的.我们研究得到了在不同松弛时间极限下,该模型光滑解与能量输运模型以及漂流扩散模型之间的联系.首先,通过构造合适的能量泛函,得到关于松弛时间的一致能量估计.其次,利用紧性分析等方法证明了在不同时间尺度下,双极非等熵Euler-Poisson方
目的肝细胞癌(hepatocellular carcinoma,HCC)是一种在世界范围内发病率和死亡率都非常高的恶性肿瘤,死亡率仅次于胃癌和食管癌,由于进展快、转移、复发率高使其患者治疗后5
近年来,全球面临着气候变暖、生态恶化等严重的环境问题,气候变化对粮食生产造成了不可忽视的影响。我国作为世界上最大的发展中国家,保证粮食生产的持续稳定和增长是维护我
本文以合浦客家方言“V落”为主要研究对象,借鉴普通话“V下”结构及其相关格式的现有研究成果,运用认知语言学、结构主义语言学和语法化的相关理论,对合浦客家方言“V落”和普通话“V下”以及两者的相关格式进行了比较研究。第一章为绪论,第二章到第六章是本文主体部分,第七章是结语。第二章到第五章从宾语位置和进入结构的动词、动态形容词的语义特征出发,对“V落”和“V下”以及两者的相关格式进行了较为细致的比较研
经营者集中有助于提升集中当事人的经济实力,增强其在市场上的竞争力,扩大原有的业务范围,并可以提高市场的竞争活力和维护社会的公共利益。因此,经营者集中成为全球市场经济中常见的一种现象。反之,若集中当事人利用其市场控制地位,违反竞争秩序、扰乱有序的市场体系,损害社会公共利益,对其进行合理的法律规制就显得异常重要。美国作为发源地,对反垄断法的研究是较全面和系统的,另外,欧洲一些国家的研究也更加体系化。随
作为无线通信中的技术基础,多输入多输出(Multiple-Input and Multiple-Output,MIMO)技术是在源端利用多天线的空间分集特点来提供增强信道容量的显著性能,同时还会提高系统在传输数据方面的可靠性。而中继技术运用到MIMO系统后,不仅可以解决信息覆盖范围差的现象,同时也能增强小区边缘用户接收信号的质量。另外,引入预编码技术的MIMO中继系统可以抑制或者消除传输信道中存在