大规模数据获取系统下的数据汇聚关键技术研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:mailnewsnow
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在地球物理勘探和高能物理等科研领域,经常会通过大型物理实验对学科的前沿理论和猜想进行研究。数据获取系统是大型物理学实验中非常重要的设备,它的核心功能是接收前端采集电子学的原始数据,按实验要求对数据进行预处理等操作,然后将其汇总记录到存储系统中,等待进一步的分析。近年来,随着科技水平进步,大规模传感器阵列中通道数量、采样频率都在不断提升,数据获取系统的原始数据率也在递增,随之而来的问题就是如何提高大规模数据获取系统的数据传输和实时处理能力。数据汇聚是数据获取系统中很重要的一个环节,主要负责对数据进行及时高效的组织和汇聚,并且将汇总后的数据传输到后端存储系统。数据获取系统可以通过提升数据汇聚能力来提高传输和处理能力的上限。不同的数据获取系统内部结构虽然存在差异,但是核心功能和工作流程都是相似的,所以理论上可以用一个通用的方案解决多个系统的数据汇聚问题。为了设计出高性能高通用的数据汇聚方案,在解决大规模数据获取系统的数据汇聚问题的同时,能够适用于多种大型物理学实验的数据获取系统,本论文展开了相关的研究工作。本论文在调研参考技术和分析方案需求的基础上,遵循通用化和标准化的设计思路,最终结合软硬件设计实现了一种适用于多种大规模数据获取系统的高速数据汇聚方案,具备很强的灵活性、改动成本低、能够稳定可靠的传输数据等优点。硬件设计方面采用了FMC标准,能够以替换FMC子卡的方式,低成本的改变扩展和前端电子学连接的数据接口,让方案从硬件层面具备了适用于多种数据获取系统的能力。逻辑设计时制定了统一规范,使用标准的接口和数据格式,并且划分了不同的功能模块,能够方便的添加自定义逻辑模块,或者是根据需求对单独模块修改和替换,可以满足方案在实际应用时的各种需求变化。本论文的组织结构上安排如下:第一章介绍了大规模数据获取系统下数据汇聚方案的研究背景和意义,确定了方案的设计目标和需要解决的关键技术问题,同时调研了国内外典型的数据获取系统的现状和发展趋势作为设计参考,并且给出了本文的研究内容和结构安排。第二章首先通过分析比较和调研接口技术明确了如何实现关键技术,从而确立了方案的整体设计内容,之后从硬件设计和逻辑设计两个方面介绍了数据汇聚的总体设计方案。第三章介绍了前端数据接收功能的实现。首先分析了方案需求的FMC子卡接口类型和数据率,然后使用Aurora IP核实现接收高速数据功能,并且利用IP核自身能够双向传输的特性设计了阻塞机制,确保了数据在传输过程中不会丢失或是重传。第四章介绍了多节点数据汇聚功能的实现。首先介绍了基于传输协议实现的数据合并机制面对两类数据获取系统的不同做法,然后介绍了通过信号仲裁实现接口轮流传输的接口调度机制,最后介绍了基于DDR3的存储功能实现的数据缓存功能。第五章从逻辑模块设计和驱动程序开发两个方面,完整的介绍了数据汇聚方案的后端数据高速传输功能是如何实现的。首先介绍了和PCIe总线协议有关的基础知识作为参考,然后介绍了调用PCIe IP核和DMA引擎实现的逻辑功能,最后介绍了驱动程序的中断方式和响应机制,以及具体DMA传输工作流程。第六章介绍了逻辑仿真的结果和联合工作站进行的传输测试结果。根据设计的测试方案,首先对逻辑模块的功能进行了仿真,之后在工作站上联合PIFC接口卡和驱动程序进行了传输测试和阻塞机制测试,用测试数据证明了该数据汇聚方案是可行的。第七章对整个论文的内容进行了总结,介绍了工作的创新点和不足之处,并且进一步指出了未来的发展方向。
其他文献
在黑龙江省资源环境评价指标体系基础上,利用脱钩方法进行分析,结果表明,大庆市资源与环境相对关系较为协调,其次是七台河市。鸡西市前两年环境压力较大,资源与环境相对关系
<正>集成电路产业合作对接会在厦门市召开近日,由工业和信息化部电子信息司、厦门市经济和信息化局主办的集成电路产业合作对接会在厦门市召开。来自国内集成电路设备和材料
蛋白质磷酸化是蛋白质翻译后最普遍、最重要的修饰之一,是生物体内一种普通的调节方式,参与调控细胞增殖、信号转导、新陈代谢、肿瘤发生等分子机能,并在精子信号转导和酶合
自然界中有多种超疏水的动植物表面,例如出淤泥而不染的荷叶,在潮湿环境下不会被雾气润湿的蚊子的复眼,能在水面上轻松行走的水黾的腿,不会被水打湿的蝴蝶的翅膀等等。由于其
噻唑磷对蔬菜根结线虫有较好的防治效果,兼具触杀与内吸双重作用,本文通过研究噻唑磷在土壤、植物根内的杀线或控制原理,对实际应用提供科学的技术依据。
从蛋白质组学研究的技术手段、蛋白质组学在人类不育及精卵相互识别并结合的机理研究、免疫法开展男性避孕方法的研究及蛋白质组学研究方法在家畜繁殖环节中的应用等几个方面
为进一步研究和完善取消高中择校生政策以来高中教育经费的保障机制,落实国家关于普及高中阶段教育的要求,在对X省214所公办普通高中进行调研的基础上,针对公办普通高中经费
<正>研究目的:体育公园作为城市休闲体育中不可或缺的载体,多年来一直为世界各国作为城市建设的重要部分。当前体育公园的休闲体育项目不能满足不同性别、年龄、文化程度、职
会议
目的系统评价尿毒清颗粒联用前列地尔治疗慢性肾功能衰竭的疗效,为临床用药提供依据。方法计算机检索知网、万方、维普、PubMed、Cochrane Library等数据库的相关文献,根据Ja
目的探讨分析江苏省某地区1999—2009年艾滋病(AIDS)流行特征,为预防控制艾滋病工作提供科学依据。方法对该地1999—2009年以现住址报告的HIV感染者/AIDS病人疫情报告报表和