【摘 要】
:
大数据的存储与分析是近年来数据库领域研究的热点,高效的索引技术是提高大数据查询分析性能的重要技术手段。在现有的数据存储模型及索引技术研究基础上,提出使用MapReduce构建列存储数据的索引。该索引技术结合MapReduce编程模型,先在Map阶段完成数据划分,然后在Reduce阶段完成数据的排序,最后在数据有序的Reduce节点上创建RB+树索引,从而减少索引创建时因为RB+树内部节点递归分裂而
【基金项目】
:
国家自然科学基金项目(61070031,61070032),上海市自然科学基金项目(11ZR1401200),核高基重大专项(2010ZX01042-001-003-004).
论文部分内容阅读
大数据的存储与分析是近年来数据库领域研究的热点,高效的索引技术是提高大数据查询分析性能的重要技术手段。在现有的数据存储模型及索引技术研究基础上,提出使用MapReduce构建列存储数据的索引。该索引技术结合MapReduce编程模型,先在Map阶段完成数据划分,然后在Reduce阶段完成数据的排序,最后在数据有序的Reduce节点上创建RB+树索引,从而减少索引创建时因为RB+树内部节点递归分裂而产生的昂贵代价和树的高度,提高数据查询的性能。通过在真实数据集上进行实验,验证了所提出方法的有效性。
其他文献
摘要:民间儿童游戏经过一代又一代人的传承与发展,积淀了丰富的文化底蕴,折射出民族的精神风貌和生活趣味。游戏过程中,幼儿积极主动,始终处于主体地位,享受自由和快乐,保持着身心愉悦与和谐状态。本文从民间游戏特点说起,在分析了幼儿园民间游戏作用的基础上,着重阐述了三点幼儿民间游戏开放与运用的策略,仅供借鉴参考。 关键词:幼儿园;民间游戏;传承发展 民间游戏是由民间创编,并在民间代代相传的活动,它以生
协同分割的一种典型定义是指在给出的一组图像中,将"相似的东西"共同分割出来。提出一种快速的协同分割算法。这种方法首先对一组图像进行特征提取,根据提取的特征确定"相似的东西"在图像中的大致范围,然后使用CPMC(constrained parametric min-cut)算法产生一系列的二值分割结果,最后通过构建随机森林对分割结果与基准之间的"相似度"进行学习,使得分割结果按"相似度"自动进行排列
针对Harris算法对噪声敏感且不具有尺度不变性的不足,将Sa4提升多小波多分辨技术运用到图像角点检测中。先利用Sa4多小波的提升格式构造图像金子塔,再在不同尺度下进行角点检测,实现多分辨率分析即小尺度下的精确定位和大尺度下的抗噪性强。最后为了综合利用各尺度下的角点信息,采用由细到粗和由粗到细相结合的角点筛选方案,克服了单一尺度下角点信息丢失,位置偏移,提取出伪角点等不足。实验结果表明,该算法定位
对经常使用 Adobe 公司下的学习者说,photoshop 并不是一个难学习的软件,但是对于初学者或者说大学生来说phoosho 还相对陌生,photoshop 是一款最受欢迎的强大图像处理软件之一,目前,手机中很多简单的图像处理的
随着Web技术的进步,对资源管理平台的功能需求不仅仅局限于管理实体资源对象,还包括将异种异构的资源封装成统一资源进行描述并加以管理的能力。Web资源管理平台接入的资源描述信息往往具有海量、异构和可变的特性。提出一种应用RESTful(Representational State Transfer)风格Web服务架构与NoSQL(非关系型数据库)技术的资源管理三层架构系统,并将其实现为基于.NET的
在当下,我国对传统文化愈加重视,而在高中的语文学习中,更是对传统教育的重视程度越来越高。而对于高中时期的学生而言,文言文学的比较多,这也就成了高中生增加传统文化知识
三维漫游已经成为十分普遍的远程游览或监控的一种方式。三维漫游过程中,系统往往需要动态调用数据并生成三维模型,这会影响系统运行的效率,降低用户体验。针对这一问题,提出一种基于神经网络的智能预取系统。历史访问日志中,模型的特征与被访问频率之间的映射被提取出来,并用以训练系统。系统可以根据模型特征判断哪些模型更可能被用户请求到,并把它们提前存入内存中。通过某三维变电站实时监控与装配管理系统对该预取系统进
摘要:小学语文是小学生掌握汉语基础知识的最基本途径,而在实际的组织教学中因为各种原因,课堂的教学效果并不是很好,导致很多学生学习语文的时候很吃力,甚至对语文产生了厌恶的情绪,如此恶性循环,导致成绩不是很好,所以如何有效地组织小学语文的课堂教学已经成了小学语文老师的必修课,而本文将就如何有效组织小学语文的课堂教学展开讨论。 关键词:小学语文;课堂教学;有效组织 语文作为一门基础性的学科,在小学的
风险评价是化工项目环境影响评价的重点工作之一,结合对MMA生产过程中工艺过程及产污环节进行解析,了解原辅料及主副产品的理化特性,通过对工程潜在的环境风险环节进行识别和风
血流特效场景可以增强虚拟手术的真实感。虚拟手术中的血流特效场景包括了有交互的血液模拟及血管壁模拟。首先基于光滑粒子流体动力学,使用Physx物理引擎模拟血液流动的物理形态,并利用Screen Space Flow算法对血流表面进行实时渲染。然后基于质点-弹簧模型,提出使用Physx物理引擎模拟可交互、有弹性形变及可切割的血管壁。最后实现两个实验场景:场景一实现肺动脉内大规模血液流动的特效;场景二实