【摘 要】
:
针对空间科学卫星探测数据的实时处理要求越来越高的问题,提出一种基于流计算框架的空间科学卫星数据实时处理方法。首先,根据空间科学卫星数据处理特点对数据流进行抽象分析
【机 构】
:
中国科学院电子学研究所,中国科学院空间信息处理与应用系统技术重点实验室,中国科学院大学,中国科学院国家空间科学中心
【基金项目】
:
中国科学院十三五信息化专项(XXH13505-04);北京市科技计划(Z181100002918002)。
论文部分内容阅读
针对空间科学卫星探测数据的实时处理要求越来越高的问题,提出一种基于流计算框架的空间科学卫星数据实时处理方法。首先,根据空间科学卫星数据处理特点对数据流进行抽象分析;然后,对各处理单元的输入输出数据结构进行重新定义;最后,基于流计算框架Storm设计数据流处理并行结构,以适应大规模数据并发处理和分布式计算的要求。对应用该方法开发的空间科学卫星数据处理系统进行测试分析,测试结果显示,在相同条件下数据处理时间比原有系统缩短了一半;数据局部性策略比轮询策略具有更高的吞吐率,数据元组吞吐率平均提高29%。采用流式计算框架能够大幅缩短数据处理延迟,提高空间科学卫星数据处理系统的实时性。
其他文献
“在两只手手腕脉搏处各挤蓝莓大小剂量,从手腕处顺着手臂内侧往手肘内侧对擦,26秒透皮吸收,10分钟到达全身血液,早晚各用一次,空腹使用。”上面这段文字出自一款凝胶的使用
朝核问题困局表现在三个方面,分别是:美国拒签和平协定与朝鲜拥核自保相互加强的死结,美国强硬施压制裁与朝鲜超强硬回应的恶性循环,美国与朝鲜谁先采取行动打破僵局的难题。
复印机从诞生以来,在成像部分有了几次变革,尤其上世纪未在成像部分有了较大的变革,将原来的可见热光源模拟成像技术改变成冷光源数字内存储有记忆成像技术。这样大大减少了光学
沙是大自然的产物,沙画是一种创造性美术活动,通过幼儿的想象,以沙土为基本材料进行构想与搭建。当小小的沙子在指尖流动时,各种艺术造型通过发现、想象、构造等多样化的探索发生交互作用。小小一粒沙在孩子们的世界里是那么有趣与神奇,原来每个孩子都是小画家,画出心中最美丽的梦。
随着互联网的高速发展,传统线下零售渠道开始出现发展疲软的状况,中国零售业此刻亟需一剂“助推剂”。AI(人工智能)技术的发展或许会成为零售产业未来发展的良方之一。AI技术
本文主要围绕何骥平老师的舞台剧作品《天下第一楼》的悲剧风格展开论述。从古典时代的古希腊悲剧出发,一直到20世纪初的批判现实主义作品,悲剧作品的风格发生了从"亚里斯多
本文针对西部乡村小学生英语教学现状,口语教学亟待改变,鉴于此,我们在教学中运用"情景教学法",效果显著。
ASP.NET 4.0中GridView控件主要用于显示数据库的查询结果。文中对GridView控件的绑定进行了研究,探讨了GridView控件在应用过程中的统计功能,并给出了其实现方法。经过系统