大数据技术在学生业绩分析中的研究与应用

被引量 : 0次 | 上传用户:ooo2231
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如今数据爆炸时代已经来临,传统的数据处理技术已经不能满足海量数据的处理需求。随着信息技术的发展,以Hadoop为首的众多大数据处理技术已经广泛应用到互联网、商业、医学、金融业以及工业等行业,而在教育中的应用确很少。因此本文应用Hadoop集群平台对本校的学生成绩数据进行了分析和处理,并且研究了一种基于Map Reduce的关联规则算法,提高了关联规则算法在处理海量数据时的效率,同时挖掘了课程之间的关联规则。本文的工作主要分为以下两个部分:首先学习了Hadoop平台的核心架构—HDFS和Map Reduce,采用HDFS实现学生数据的存储。在深入了解到Map Reduce编程模型后,针对传统Apriori算法的局限性,实现了一种基于Map Reduce编程模型的改进算法,并通过实例验证了改进后算法的可行性。然后通过改变数据集的大小和改变最小支持度阈值以及最小置信度阈值这三种方式对这两种算法的性能进行了对比,实验证明,经过改进Map Reduce Apriori算法的性能在各个方面都要优于传统的Apriori算法。其次本文搭建了Hadoop集群平台,将改进的算法应用到真实的学生成绩数据中,挖掘出了课程之间隐藏的关联关系,同时本文也应用Hadoop平台进行了一些统计分析的工作。本文的主要创新点为:(1)根据Map Reduce编程模型的特点,对传统的Apriori关联规则算法进行了改进,改进的算法不仅实现了发现频繁项集这一过程,同时也根据发现的频繁项集筛选出了强关联规则;(2)通过对大数据技术的学习和学生数据的分析,本文搭建了Hadoop集群来分析和处理真实学生成绩数据。高校中时时刻刻都会产生大量的数据,同时教育数据中隐藏的潜在价值也是无穷无尽的,更值得我们去探索。如果能将如此丰富的教育数据转化为有价值的教学研究成果,并且应用到改善教学决策的制定和实践中,那么对于各大高校和教育研究机构来说意义非凡。希望通过本文的工作能为以后的研究学者提供一个方向,也能为学校的教育工作者在以后的教学管理上提供借鉴。
其他文献
学术论文写作是高年级学生的一次学思结合的实践。本研究基于英语专业本科毕业论文写作与指导的环节,从教师介入的研究视角,分析了论文指导中英语教师所体现出的师德素养、科
近年的研究发现糖尿病肾病是一种炎症性疾病。许多炎症因子及前炎症因子如急性时相蛋白、趋化因子、黏附分子、肿瘤坏死因子-α、血浆纤溶酶原激活物抑制因子、白细胞介素等
民族认同策略是我在《东方主义》一书及我的新著中所分析的帝国主义文化事业的核心。其基本观点在于,承认并笃信东方人和非洲人与欧洲人之间存在着本质差异。譬如,一位法国或德
1917年俄国十月革命引发的关注和争论广泛而持久。早在十月革命爆发前,俄国思想理论界围绕其历史必然性和现实可能性就展开过激烈争论,十月革命胜利后,围绕这场革命的性质、
就水族地区中学生化学学习兴趣的现状展开调查,得出水族地区学生对化学的喜爱程度不高、化学学习兴趣不够稳定的结论。分析调查数据认为造成这一结果有3方面的原因,并根据水族
目的探讨2型糖尿病患者焦虑抑郁情绪与个性、应对方式的关系。方法采用综合性医院焦虑抑郁量表(HAD)、艾森克个性问卷修订版(EPQ)和医学应对问卷(MCMQ)对120例2型糖尿病患者
电致发光器件作为全固态显示器件,其具有图形显示质量高,受温度变化影响小,低功耗,薄型以及质轻等优点,而成为研究者近年来研究的重点。进入21世纪以来,伴随着人们对显示和照
<正>沈阳城市建设学院,前身为沈阳建筑大学城市建设学院,成立于2000年7月,2013年经教育部批准升格为独立设置普通高校。学校是一所培养建筑设计、城乡规划、土木工程、道路交
近年来,随着法律、法规的健全,病人投诉呈上升趋势,并逐渐成为社会关注的焦点,这和整个社会大环境的变化是分不开的.作者通过对比分析部分病人投诉原因和护理人员对投诉的认
著作权是绝对排他的权利,排除任何人的侵害,善意受让人或被许可人也不例外。对善意受让人或被许可人的受让和使用行为,虽判令其停止侵权,但不应要求其承担赔偿责任。应当正确