基于Flink的空间科学卫星数据实时处理方法

来源 :计算机仿真 | 被引量 : 0次 | 上传用户:g471151931
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为满足地面数据处理系统高吞吐率、低延迟地处理空间科学卫星下行数据的需求,提出一种基于流式计算的空间科学卫星下行数据实时处理方法。方法借助消息中间件Kafka的分区实现数据分流,分流后的数据依次流入Flink集群中的并行单元实现并行处理。使用GECAM空间科学卫星下行数据进行仿真,结果表明,上述方法具有较高的吞吐率和较低的延迟,并且可以通过扩展服务器数量实现更高吞吐率和更低延迟,满足空间科学卫星下行数据的高速实时处理需求。
其他文献
数据是未来世界不可或缺的重要生产要素和战略资源,是互联网信息流通的唯一介质,与传统的信息具有不同的性质。数据安全是数据资源合理利用的基础,大数据时代的互联网平台依托技术优势和市场强势地位,拥有广泛的数据权利,控制着大量数据资源,而刑法对于该主体的规制存在缺位。刑法发挥保护数据安全的功能应当重点以互联网平台为主要对象进行行为规制。本文以互联网平台为研究对象,重点研究了平台企业数据泄露、数据滥用、数据
学位
【目的】挖掘国家专利数据库中治疗泌尿系结石专利内服中药复方的用药规律。【方法】在“国家知识产权局”网站(http://www.cnipa.gov.cn/)中检索关于泌尿系结石的内服中药复方专利,将中药录入中医传承辅助平台(V2.5),统计药物频次,进行药物关联组合及关联规则分析,并提取核心药物组合和潜在的新方组合。【结果】共纳入308首处方,涉及443味中药。其中用药频次较高的中药为金钱草、鸡内金
期刊
为了给广大业主带来更好的物业管理服务,最大限度保障广大业主的生命财产安全,各物业管理企业应提升自身管理工作的科学程度,制定健全、完善的应急机制,从而在各类突发事件发生时有条不紊地做好广大业主的疏散工作及生命财产保护工作。本文就新时代背景下物业管理企业应急机制的建立与完善展开研究,首先简要介绍物业管理企业应急管理的现状,随后提出新时代背景下物业管理企业应急机制的建立与完善路径,以期为相关物业管理企业
期刊
为提升评价准确性,提出基于模糊决策模型的井工煤炭开采生态环境影响评价方法。通过生态环境影响因素识别,获取多个对环境造成直接影响的指标,设立评价指标体系,根据各个指标的定量化途径对指标进行定量分析,利用模糊决策模型计算指标的从优隶属度,输出生态环境状况指数,进而明确生态环境影响等级。以井工煤炭开采工程为研究案例,对所提评价方法的评价准确性进行测试,结果表明,设计的方法得到的生态环境状况指数与实际值更
期刊
【目的】分析广东韶关黄金柰李果实品质与土壤元素、叶片元素之间的关系,筛选影响果实品质的关键因子,为柰李园精准施肥提供理论依据。【方法】在粤北黄金柰李种植区域采集果实、叶片和土壤样本各15份,利用K均值聚类分析方法对果园果实品质进行分类,分析不同类型果园果实品质指标与土壤、叶片矿质养分元素含量间的相关性。【结果】黄金柰李园土壤pH值为5.06,土壤有机质含量总体适量,氮、磷、钾有效养分处于适量或丰富
期刊
中国有毒动物数据集整合了中国陆生有毒动物物种、动物毒素活性成分、有毒动物防治等数据,共包括数据记录1 371条,物种照片、蛋白质序列和空间结构图片等1 362张,数据量约29 MB。本数据集按照生物学专家和信息技术人员共同研究确定的标准建设而成。数据收集整理由专业人员完成,并经过了专家审核以及计算机自动校验。本数据集可以为科研机构、大学和企业等提供有毒动物研究、动物毒素资源开发利用的数据和信息支持
期刊
随着生态文明法治建设的持续推进,生态环境影响评价的规范效力从公法层面拓展至私法层面、从行政执法延伸至司法审判。“经过环评”“获得环评许可”等成为生态环境侵权诉讼中被告对抗原告诉讼请求的高频抗辩理由。针对生态环境影响评价的抗辩效力在学界尚存争议的现实,通过对2010年至今涉及“生态环境影响评价”为抗辩事由的125件生态环境侵权案件的梳理分析可知,生态环境影响评价不仅在公法层面发挥着规范生态环境利用行
期刊
失眠以睡眠启动和/或维持困难为突出表现,是最为常见的睡眠障碍,严重影响患者生活质量。因其难以在体外观察,因此动物模型对于镇静催眠药物的筛选和评价是至关重要的。本文对现有常用的失眠啮齿类动物模型进行梳理总结,分为应激诱导型和药物诱导型两大类,其中应激诱导型包括换笼法、水上平台法、足底电刺激、感官刺激、母婴分离、产前应激等,药物诱导型包括咖啡因、对氯苯丙氨酸、甲状腺素诱导失眠动物模型,并重点分析它们对
期刊
生态保护红线人为活动生态环境影响评价是强化生态保护红线的刚性约束,是完善生态保护红线监管制度的重要内容之一。然而,由于相关管理工作尚处于起步阶段,生态保护红线内人为活动生态环境影响评价的指标体系和技术方法还未建立,无法满足生态保护红线的监管需求,亟需开展相关研究。本文基于生态保护红线人为活动管控要求,通过对生态保护红线内人为活动特征进行分析,衔接各相关领域评价技术与标准规范,提出了一套以生态保护红
期刊
目的 通过检测帕金森病(Parkinson’s disease,PD)患者血清微小核糖核酸(miRNA,miR)-7和α-突触核蛋白(α-synuclein,α-Syn)水平,分析两者与认知功能障碍的关系。方法 收集2020年1月~2022年1月在沧州市中心医院就诊的PD患者106例作为PD组,并根据Hoehn-Yahr分级标准分为六个等级,随机选择同期性别、年龄相匹配的106例健康体检者作为对照
期刊