基于云计算技术的园所儿童大数据管理平台设计与实现

来源 :浙江工商大学 | 被引量 : 0次 | 上传用户:originalmemory
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着国内经济的快速发展和科研探索在幼教领域的进展,我国对教育行业的重视让幼教市场的规模逐渐扩大。而当前面向幼教领域的管理系统,不仅难以保证数据的安全性,而且难以应对短期激增并且有着较高价值的非结构化数据。从系统规划上看,大多会因为系统模块间牵连过于紧密或是各子系统间数据交互衔接困难,导致最终开发整合过程低效。为此,本文面向幼教领域研究和开发了一个基于Hadoop技术的园所儿童数据服务系统,为幼教领域搭建一个完整的资源管理和信息交互平台。论文的主要研究工作归纳如下:(1)充分梳理当前大数据技术栈的特点,整合计算机硬件资源,实现了云计算平台的部署。本系统采用Hadoop系统与基础服务平台相结合的结构设计,利用其对数据存储稳定、高效、灵活的特性,解决了海量激增的非结构化数据管理问题。(2)平台将Hadoop分布式系统与基于Spring Cloud的微服务架构相结合,将系统分为多个模块进行独立开发和部署,实现了各大模块的有效解耦。这种组合方式可以让平台保持较高的柔韧性,并且保有其在性能和功能上的灵活性和可扩展性。(3)基于需求分析和架构设计,实现了一个完整、可靠、高效的园所数据管理平台。针对资源共享模块,搭建了基于HDFS的园所幼教资源库,并利用基于人脸识别的照片分发系统,实现了照片管理模块内的功能。此外,论文先后分析并优化了基于内容的协同过滤算法,并基于Map Reduce分布式计算框架实现了幼教资源推荐服务。(4)为了提高分布式文件系统的稳定性和健壮性,本Hadoop集群的搭建采取了双Name Node节点的HA设计。同时根据系统内硬件资源配置情况以及运营中的实际问题,有针对性地从Map Reduce运算性能和HDFS小文件处理两个角度入手,有效改善了系统空间利用率和存取效率。最后研究并开发了一个实际部署运营的儿童数据资源管理平台,平台的部署与稳定运行验证了园所儿童数据管理平台的稳定性和高效性。
其他文献
学位
学位
学位
电火花加工对导电材料的强度和硬度没有要求,是一种非接触的特种加工手段。电火花加工技术以其独特的加工优势在航空设备、电子仪表、医疗工程等领域有着重要作用。针对微细电火花加工轴向定位不及时、极间加工电圧不稳定以及极间碎屑产物不易排出导致的加工无法正常进行的问题,本文将具有非线性、响应快、宽频带、高精度的磁力驱动器作为微细电火花加工的局部执行机构,采用智能控制技术对微细电火花加工磁力驱动器控制系统进行控
高效开发煤层瓦斯,既能利用煤层气,又能消除瓦斯灾害,对实现煤炭安全生产、保障国家能源发展战略具有重要意义。高效开采复杂煤层瓦斯必须对煤层大范围均衡增透改造,传统煤矿井下增透技术如密集钻孔、水力割缝等增透范围有限,容易出现抽采空白带,存在重大安全隐患。针对上述问题,团队提出深部矿井自进式水力喷射钻孔网络化增透抽采的新思路,即利用自进式钻头在岩巷穿层孔中实现转向钻进煤孔,在煤层中构造出树状形态的抽采孔
学位
学位
学位
学位
学位