MapReduce在气象数据传输时效统计中的应用

来源 :南京信息工程大学学报:自然科学版 | 被引量 : 0次 | 上传用户:skyedge228
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
气象数据的传输时效保障已成为探测和信息部门的重要工作之一,快速统计各类数据到报率和及时率成为一项迫切需求.基于MapReduce编程模型设计了各类数据到报率和及时率的算法,在Hadoop平台上利用该算法实现了各类数据的逐日到报率和及时率的统计,选择文本方式和Sequence File方式作为MapReduce计算模型的输入数据源进行对比试验.试验结果表明,Sequence File作为数据源能更好地提升MapReduce并行运算的性能.
其他文献
在封建社会儒学是中央政府在边疆民族地区发展教育的主要方式。明王朝在鹤庆、剑川、北胜等地设置学宫、书院、社学等;至清代,儒学向丽江、中甸、维西等民族地区拓展。明清时期
三四线城镇是互联网的未来当今日头条壮大到可以跟BAT叫板,各大门户网站也纷纷推出移动客户端,许多人都认为杀成一片血海的资讯分发市场已经没有了竞争空间。然而,《趣头条》
这真是《三国杀》玩家的情怀吗?IP游戏,其本质就是通过一个具有知名度的IP,去将这些IP的受众导入目标游戏里。在IP游戏刚刚兴起的时候,国内版权意识不强,把武侠小说IP和日本
摘要  本文研究了一类具有异步控制器的离散马尔可夫Lur’e跳变系统的稳定性及 2增益性能.通过引入隐马尔可夫模型(HHM)来描述所设计的控制器和原始系统之间出现的异步现象.利用线性矩阵不等式(LMI)方法分析了闭环系统的稳定性和 2增益性能.然后提出了一个充分条件使得闭环系统随机稳定,并使得从扰动到系统输出的 2增益达到最小.同时,通过求解给定条件来设计一个由线性状态反馈和扇形有界非线性输出反馈
在“台达杯”高校自动化设计大赛结束后,我们非常有幸地邀请到了台达机电事业群智慧制造业务全球总监李逢堉接受专访。作为拥有深厚技术背景的专业人士,他对于“台达杯”的视
不久前,一张“拼多多上7.5元销售原价888元的贝因美红爱加奶粉”的图片在网上被广泛传播。对于外界传闻的销售假奶粉质疑,拼多多官方表示,这些低价食品实际上只是临期商品。
一集45分钟左右的剧集,片头、预告、片中与片尾均花式插入各类广告,会员也无法幸免.近日,《如懿传》在开播首日因广告问题,让独播平台腾讯视频先“收割”了一波网友的不满和
前不久,美图在北京举行了发布会,除了发布新机美图T9以外,美图还宣布将进军芯片领域,推出自主研发的MT-AI图像处理芯片.然而美图做手机的时间还不长,现在就着手推出芯片了,这
摘要为了适应不同颗粒度的业务需求,最大化波分复用传输系统的频谱效率,光网络正逐渐朝着更灵活、高效、节能的趋势发展.基于带宽可变收发机(BVT)的灵活光网络传输技术因而得到了广泛的关注与研究.本文概述了国内外支持灵活光网络的数字相干光传输技术的最新研究进展,包括发射端支持传输速率可变的自适应编码、调制技术以及接收端相应的调制码型识别技术,最后对灵活光网络传输的未来研究方向进行了展望.  关键词灵活光
6月1 8日,京东的“朋友圈”再添一位巨头—谷歌携5.5亿美元入股京东。随后京东CEO刘强东发布内部信称,这次合作标志着京东全球化战略全面起航。此前,国际化一直是包括京东在