【摘 要】
：
随着农业大数据时代的来临,传统串行程序及关系数据库已经不能满足对大数据处理的需求,使用分布式平台对数据进行处理逐渐取代传统的数据处理技术。本文使用Hadoop分布式平台
【机 构】
：
云南农业大学基础与信息工程学院,云南农业大学机电工程学院
论文部分内容阅读
随着农业大数据时代的来临,传统串行程序及关系数据库已经不能满足对大数据处理的需求,使用分布式平台对数据进行处理逐渐取代传统的数据处理技术。本文使用Hadoop分布式平台,结合非关系型数据库Hbase和并行编程模型MapReduce,对香格里拉地区酿酒葡萄种植区的环境数据的存储和计算进行了设计,测试了Hbase对数据的存储性能以及MapReduce用于回归分析的性能,并将MapReduce并行计算程序与单机串行程序进行了性能对比。结果表明,通过对Hbase进行合适的配置,数据写入时间随着节点的增加而减少,存储性能具有良好的扩展性;MapReduce在处理少量数据时效率低于串行程序,但随着数据量增加,其计算效率明显优于串行程序。
其他文献
地方志是记载地区事务最全面、最重要的资料,天津旧志中就保存了很多宗教的记载,反映了该地区的宗教面貌与沿革变化。但同时,地方志对宗教的记载也存在一定的的缺陷与不足,宗
虽然 Wigner- Ville分布具备时 -频分布的优点 ,但 Wigner- Ville分布的一个致命缺点就是交叉干扰项的存在 ,并影响其广泛应用。本文介绍了 Wigner双谱、Wigner三谱 ,以及如
桦木、桦树皮与黑龙江古代各民族政治、经济、文化生活息息相关,它不仅是先民们生产、生活中重要的原材料,还是肃慎族及其以后的黑龙江古代民族与中原地区进行频繁交往的一种
近年来,随着义乌市国际贸易综合改革试点的顺利推进,义乌小商品出口量不断增长。为配合小商品市场的发展,义乌海关实行了一系列的出口通关便利化的改革创新举措。但是,义乌小
作为历史上经常性移民活动中的一小部分,山西洪洞大槐树移民的传说本无足轻重。但是在近代以来,洪洞大槐树却成为众多人士心目中的家园象征,这在很大程度上应归因于,民国初年
介绍了人乳中的蛋白质、脂肪、碳水化合物、矿物质、维生素、免疫活性物质、激素、生长因子等,指出了人乳与婴幼儿配方奶粉的差别,为婴幼儿配方奶粉的母乳化指明了方向,并阐
采用田间诱集效果试验,就诱捕器不同置放高度、不同置放方位、不同诱芯剂量、不同类型诱捕器对梨小食心虫的诱集数量进行了研究,以探讨梨小食心虫性诱剂应用的关键技术。结果
概述了梨小食心虫的形态特征、危害特点及发生规律,针对目前梨小食心虫的发生危害特点以及防治中的问题,提出了掌握关键防治时期,协调应用农业、生物、化学等多项技术措施,形
[目的]探讨不同栽培基质对万寿菊生长的影响,筛选出适合应用于生产的栽培基质。[方法]以园土为对照,用4种栽培基质A(草炭土+蛭石)、B(珍珠岩+蛭石)、C(草炭土+珍珠岩)、D(草