【摘 要】
：
为实现大规模矢量数据的高性能处理,在开源项目Hadoop基础上,设计与开发了一个基于MapReduce的矢量数据分布式计算系统。根据矢量空间数据的特点,通过分析Key/Value数据模型
【机 构】
：
长安大学地球科学与资源学院,中国科学院地理科学与资源研究所,重庆师范大学地理科学学院
【基金项目】
：
国家自然科学基金(No.41101364);中国科学院地理科学与资源研究所“一三五”战略科技计划项目(No.2012ZD010)
论文部分内容阅读
为实现大规模矢量数据的高性能处理,在开源项目Hadoop基础上,设计与开发了一个基于MapReduce的矢量数据分布式计算系统。根据矢量空间数据的特点,通过分析Key/Value数据模型及GeoJSON地理数据编码格式,构建了可存储于Hadoop hdfs的矢量数据Key/Value文本文件格式;探讨矢量数据的MapReduce计算过程,对Map数据分片、并行处理过程及Reduce结果合并等关键步骤进行了详细阐述;基于上述技术,建立了矢量数据分布式计算原型系统,详细介绍系统组成,并将其应用于处理关中地区1∶10万土地利用矢量空间数据,取得较好效果。
其他文献
针对车牌字符识别中大部分单一特征提取方法在字符识别上的局限性,提出了一种车牌字符多特征提取方法。在经过预处理后的车牌细化字符基础上提取字符4个侧面的笔画特征、拐点
<正> 一般叙述丁酸细菌所能发酵的物质很多,如多种糖类、淀粉,有肌酸及其盐类、醇、氨基酸、纤维素、果胶质及甘油等;它还有将土壤中不溶性磷酸三钙变成可溶性的能力。各别菌
本文系统分析和研究贵州红星发展股份有限公司(下称“贵州红星公司”)的跨国经营战略,是贵州红星公司实施国际化经营和全球战略的必由之路,对转变和创新贵州红星公司的现有跨
党的十八大报告指出:要全面实施素质教育,深化教育领域综合改革,提高教育质量,培养学生创新精神。这是改革开放以来我国教育改革的宗旨,也是广大教育工作者一直共同努力的方
昆明消防指挥学校是一所面向全国招收公安消防部队基层消防员考生的专门学校,它的主要任务是为全国公安消防部队培养讲政治、懂技术、会管理、善指挥的基层指挥和管理人才。
近些年来,三维激光扫描技术不断发展,已经广泛的应用到各行各业中。随着轨道交通项目的建设,越来越多的隧道工程项目开工。隧道工程中需要进行断面测量,超欠挖和开挖量测量计
互联网金融是信息技术和金融创新的有机结合。大数据时代,网络金融正在不断蚕食商业银行等传统金融模式的固有领地。以互联网为代表的现代信息技术,特别是第三方支付、移动支
本文以整体性治理下的跨部门协同为主题,对中国农村扶贫中的跨部门协同模式作系统的梳理与分析。首先从已有的理论中建立分析框架,并认为中国农村扶贫中"三位一体"的扶贫工作
主流媒体是我国媒体的中流砥柱,在当前复杂的舆论环境中更应该不断提升传播力、引导力、影响力、公信力。《新闻联播》为适应传媒变革新趋势,找准新闻传播新语态,设置了短视
<正> 卷心菜含抗坏血酸的维生素C,它外面的叶子含量最高,每一百克中含六十毫克,特别是在早期卷心菜的新鲜叶子里。卷心菜的特点是抗坏血酸既以纯净形式,又以其前身抗坏血酸结