论文部分内容阅读
摘要：目前基于职教云SPOC平台的混合式课堂教学过程性考核评价主要采用主观赋予权重的方法，为了提高评价的客观性和真实性，同时又兼顾评价指标的重要性程度，提出基于熵值法和层次分析法（AHP）的主客观相结合的组合赋权方法确定考核指标的权重，并以职教云《地理信息技术》混合式教学课程为例，着重介绍了权重计算方法和计算过程，结果显示权重最大的指标是“作业”和“学习时长”，其次是考试和课堂活动，权重最小的是“课件学习”。利用该方法确定的权重更加合理、客观，研究成果为职教云SPOC平台的混合式课堂教学过程性考核指标权重设置提供了新的思路。文章将“学习时长”新加入到了评价指标体系中，结果显示“学习时长”指标对学生综合成绩的区分度较高，该分析结果为职教云平台指标体系的优化提供了参考，具有一定的实用价值。
关键词：信息熵;层次分析法;混合式教学;过程考核
引言
以信息技术推动职业教育教学改革创新，加快推进职业教育信息化发展是我国教育改革的重要决策[1-3]。在“互联网 +”时代，基于MOOC（Massive Open Online Courses）或SPOC（Small Private Online Course）平台开展线上线下混合式课堂教学已成为当前高校信息化教育教学改革的热潮[4-8]。截止2020年12月，高等教育出版社开发的“智慧云2.0”SPOC平台上已开展的SPOC课程数达32万门以上，教学班级达93万个以上。海量的线上教学资源和“职教云”校级专属SPOC平台服务、“云课堂”APP服务，为教师开展线上线下混合式课堂教学提供了良好的支持。随着混合式課堂教学改革的深入，与混合式课堂教学相适应，必须改革相应的考核方式，职教云SPOC在线教学平台详细地记录了学生线上、线下学习行为，为学生过程化考核提供了基础数据，SPOC中的考核指标权重可以灵活设置比例，然而如何科学、合理、客观地设置权重是当前亟需解决的实际问题。
通过文献分析发现现有的关于混合式教学过程性考核评价指标的权重设置主要采用主观赋权法，例如梁少英等人设计了《内科护理学》课程混合式学习过程性评价指标体系，并利用层次分析法确定各指标权重。张波，李娅、张兴芹在开展课程混合式教学中均采用过程性考核，但考核权重直接主观设定。主观赋值法是人为根据评价指标的重要程度来确定权重的大小，受主观影响较大，与专家的知识背景与经验依赖性程度高，为了减少对考核结果的人为主观影响，同时又兼顾指标的重要性，本文结合客观赋值法-熵值法和主观赋值法-层次分析法的优点，提出基于熵值法和层次分析法的组合赋权法来确定混合式课堂教学过程性考核的指标权重。
一 过程考核指标体系
职教云是高等教育出版社开发的以学校为单位面向师生的SPOC（小规模限制性在线课程）在线教学平台，教师可以将智慧职教教学资源库中的课程资源直接导入到职教云中开展基于SPOC的线上线下混合式教学。职教云平台可详细记录学生线上学习行为数据和线下课堂中的讨论互动、课堂测试等课堂表现行为，其平台设置的过程性考核指标体系分为两级体系，一级指标为：课件学习、课堂活动、作业、考试，每个一级指标下面又包括多个二级指标[27]，平台同时记录了学生线上学习时长，学习时长反映了学生线上投入学习的时间，是学生线上学习行为的重要体现，也是学生内部学习动机的体现，因此这里将学习时长也作为综合成绩考核的一级指标。
二 研究对象与方法
1 研究对象
选取我校工程测量专业 2017 级 2 个班共 101名学生为研究对象，收集学生在职教云《地理信息技术》SPOC课程中的线上、线下学习记录作为基础研究数据。
2 考核权重计算方法
为了兼顾各个指标的重要性和客观性，本文采用组合赋权法计算综合权重，即根据各指标的变异程度，利用信息熵计算出各指标的熵权值，再通过熵权对层次分析法计算的指标权重进行修正，从而得出较为客观的的指标综合权重，提高考核结果的客观性和公平性。
计算步骤为：（1）根据各一级指标下的二级指标得分和重要性分别构造原始数据矩阵和判断矩阵，计算二级指标综合权重。（2）再根据二级指标综合权重和得分计算一级指标各项得分，再根据一级指标的得分和重要性程度计算一级指标综合权重。
若根据熵值法计算各指标的权重 ，根据AHP计算的各指标权重为 ，则指标的综合权重 计算如公式（1）所示。
三 结果与分析
3.1指标综合权重计算结果
本研究的所有数据计算在EXCEL软件和R软件（版本：3.5.2）中完成。先根据各一级指标下的二级指标得分分别构造原始数据矩阵，计算二级指标综合权重。实验班级学生在《测绘地理信息技术》课程学习中，课件的评价、问答、笔记、纠错数据均为0，因此这里只选择学习进度作为课件学习的二级指标，该课程布置了4次班级作业，期末考试1次，因此这里需要计算课堂活动、作业两个一级指标下面的二级指标权重。根据前述综合权重计算方法，计算得到二级指标的熵权值、AHP权重、综合权重，再根据二级指标综合权重和得分计算一级指标各项得分，根据一级指标的得分和重要性程度计算一级指标综合权重。
3.2权重结果分析
由图1所示的五个一级指标的权重计算结果显示专家认为“考试”对综合成绩的重要性程度最高（AHP权重为0.41），其次是“作业”和“学习时长”。而利用该班的实际数据计算的“学习时长”与“作业”的熵权值最大，最具有区分度，而“考试”和“课件”的区分度最低，这与AHP权重计算结果有明显的差别。熵值法中的考试权重偏低与考试题目难易程度的数量分布有关系，由于此次期末考试试题难度集中在一般和中等程度，导致大部分同学都能得到较高的考试分数，因此“考试”对综合成绩的区分度不高，而利用熵权值和AHP权重计算出来的综合权重对考试的排序进行了调整，这样兼顾了该指标的重要性程度和客观性，有利于提高评价结果的科学性和公平性。 从综合权重来看，影响综合成绩得分最大的因素是“作业”，其次是线上“学习时长”，再次是“考试”和“课堂活动”，权重最低的是“课件”。“课件”的熵权值、AHP权重和最终的综合权重都是最低的，这说明“课件”学习进度对学生综合成绩的影响并不大，这是由于在课程中教师要求学生必须完成所有課件的学习，很多同学的课件学习进度指标都能达到100%，这是最容易完成的一项教学活动，因此它对最终成绩的贡献并不大，并且课件学习进度只能体现出学生对这一活动的完成度，并不能体现出学生学习效果的好坏，而课件学习的完成质量在“学习时长”中却能体现出来，因为课件的总量是一定的，学生在线学习时间长说明他在完成了规定的任务之后主动登陆学习资源，因此“学习时长”能体现出学生在线学习的主动性和时间投入差异，“学习时长”的熵权值和综合权重都比较高，这也在一定程度上说明本文提出的组合赋权方法计算的权重更加客观、合理。而职教云平台上，并没有将“学习时长”作为综合成绩考核指标，需要教师将各项成绩导出为EXCEL后自行进行计算，在此也建议职教云平台能将“学习时长”纳入综合成绩的考核指标体系中。
四 结论
为了解决混合式课堂教学过程性考核评价指标权重设置的盲目性和强主观性，本文以职教云SPOC平台的《地理信息技术》混合式教学课程的平台数据为基础，提出了一种基于熵值法和层次分析法的组合赋权方法来确定评价指标的权重，该方法既能体现各指标的真实性和客观性，又能兼顾指标的重要性。本文还将“学习时长”新加入到了职教云SPOC平台的评价指标体系中，实验数据计算结果显示“学习时长”指标对学生综合成绩的区分度较高，权重仅次于“作业”指标。本研究不仅为线上线下混合式课堂教学过程性考核指标权重的设置提供了新的解决思路，而且也为职教云平台指标体系的优化提供了参考，具有一定的实用价值和参考意义。
参考文献
[1]教育部关于印发《教育信息化“十三五”规划》的 通 知[DB/OL].http：//www.moe.gov.cn/srcsite/A16/s3342/201606/t20160622_269367.html.
[2]《高等职业教育创新发展行动计划（2015-2018年）》征求意见稿[DB/OL].http：//www.gov.cn/xinwen/2015-09/09/content_2927835.htm.
[3]国家中长期教育改革与发展规划纲要（2010-2020 年）[DB/OL]. http：//www.gov.cn/jrzg/2010-07/29/content_1667143.htm，2020-12-16.
[4]王芳，钱乐祥，谢学通，骆仁波，郭冠华.基于SPOC的地图学课程深度教学模式研究[J].大学教育，2020（12）：100-102.
关键词：信息熵;层次分析法;混合式教学;过程考核
引言
以信息技术推动职业教育教学改革创新，加快推进职业教育信息化发展是我国教育改革的重要决策[1-3]。在“互联网 +”时代，基于MOOC（Massive Open Online Courses）或SPOC（Small Private Online Course）平台开展线上线下混合式课堂教学已成为当前高校信息化教育教学改革的热潮[4-8]。截止2020年12月，高等教育出版社开发的“智慧云2.0”SPOC平台上已开展的SPOC课程数达32万门以上，教学班级达93万个以上。海量的线上教学资源和“职教云”校级专属SPOC平台服务、“云课堂”APP服务，为教师开展线上线下混合式课堂教学提供了良好的支持。随着混合式課堂教学改革的深入，与混合式课堂教学相适应，必须改革相应的考核方式，职教云SPOC在线教学平台详细地记录了学生线上、线下学习行为，为学生过程化考核提供了基础数据，SPOC中的考核指标权重可以灵活设置比例，然而如何科学、合理、客观地设置权重是当前亟需解决的实际问题。
通过文献分析发现现有的关于混合式教学过程性考核评价指标的权重设置主要采用主观赋权法，例如梁少英等人设计了《内科护理学》课程混合式学习过程性评价指标体系，并利用层次分析法确定各指标权重。张波，李娅、张兴芹在开展课程混合式教学中均采用过程性考核，但考核权重直接主观设定。主观赋值法是人为根据评价指标的重要程度来确定权重的大小，受主观影响较大，与专家的知识背景与经验依赖性程度高，为了减少对考核结果的人为主观影响，同时又兼顾指标的重要性，本文结合客观赋值法-熵值法和主观赋值法-层次分析法的优点，提出基于熵值法和层次分析法的组合赋权法来确定混合式课堂教学过程性考核的指标权重。
一 过程考核指标体系
职教云是高等教育出版社开发的以学校为单位面向师生的SPOC（小规模限制性在线课程）在线教学平台，教师可以将智慧职教教学资源库中的课程资源直接导入到职教云中开展基于SPOC的线上线下混合式教学。职教云平台可详细记录学生线上学习行为数据和线下课堂中的讨论互动、课堂测试等课堂表现行为，其平台设置的过程性考核指标体系分为两级体系，一级指标为：课件学习、课堂活动、作业、考试，每个一级指标下面又包括多个二级指标[27]，平台同时记录了学生线上学习时长，学习时长反映了学生线上投入学习的时间，是学生线上学习行为的重要体现，也是学生内部学习动机的体现，因此这里将学习时长也作为综合成绩考核的一级指标。
二 研究对象与方法
1 研究对象
选取我校工程测量专业 2017 级 2 个班共 101名学生为研究对象，收集学生在职教云《地理信息技术》SPOC课程中的线上、线下学习记录作为基础研究数据。
2 考核权重计算方法
为了兼顾各个指标的重要性和客观性，本文采用组合赋权法计算综合权重，即根据各指标的变异程度，利用信息熵计算出各指标的熵权值，再通过熵权对层次分析法计算的指标权重进行修正，从而得出较为客观的的指标综合权重，提高考核结果的客观性和公平性。
计算步骤为：（1）根据各一级指标下的二级指标得分和重要性分别构造原始数据矩阵和判断矩阵，计算二级指标综合权重。（2）再根据二级指标综合权重和得分计算一级指标各项得分，再根据一级指标的得分和重要性程度计算一级指标综合权重。
若根据熵值法计算各指标的权重 ，根据AHP计算的各指标权重为 ，则指标的综合权重 计算如公式（1）所示。
三 结果与分析
3.1指标综合权重计算结果
本研究的所有数据计算在EXCEL软件和R软件（版本：3.5.2）中完成。先根据各一级指标下的二级指标得分分别构造原始数据矩阵，计算二级指标综合权重。实验班级学生在《测绘地理信息技术》课程学习中，课件的评价、问答、笔记、纠错数据均为0，因此这里只选择学习进度作为课件学习的二级指标，该课程布置了4次班级作业，期末考试1次，因此这里需要计算课堂活动、作业两个一级指标下面的二级指标权重。根据前述综合权重计算方法，计算得到二级指标的熵权值、AHP权重、综合权重，再根据二级指标综合权重和得分计算一级指标各项得分，根据一级指标的得分和重要性程度计算一级指标综合权重。
3.2权重结果分析
由图1所示的五个一级指标的权重计算结果显示专家认为“考试”对综合成绩的重要性程度最高（AHP权重为0.41），其次是“作业”和“学习时长”。而利用该班的实际数据计算的“学习时长”与“作业”的熵权值最大，最具有区分度，而“考试”和“课件”的区分度最低，这与AHP权重计算结果有明显的差别。熵值法中的考试权重偏低与考试题目难易程度的数量分布有关系，由于此次期末考试试题难度集中在一般和中等程度，导致大部分同学都能得到较高的考试分数，因此“考试”对综合成绩的区分度不高，而利用熵权值和AHP权重计算出来的综合权重对考试的排序进行了调整，这样兼顾了该指标的重要性程度和客观性，有利于提高评价结果的科学性和公平性。 从综合权重来看，影响综合成绩得分最大的因素是“作业”，其次是线上“学习时长”，再次是“考试”和“课堂活动”，权重最低的是“课件”。“课件”的熵权值、AHP权重和最终的综合权重都是最低的，这说明“课件”学习进度对学生综合成绩的影响并不大，这是由于在课程中教师要求学生必须完成所有課件的学习，很多同学的课件学习进度指标都能达到100%，这是最容易完成的一项教学活动，因此它对最终成绩的贡献并不大，并且课件学习进度只能体现出学生对这一活动的完成度，并不能体现出学生学习效果的好坏，而课件学习的完成质量在“学习时长”中却能体现出来，因为课件的总量是一定的，学生在线学习时间长说明他在完成了规定的任务之后主动登陆学习资源，因此“学习时长”能体现出学生在线学习的主动性和时间投入差异，“学习时长”的熵权值和综合权重都比较高，这也在一定程度上说明本文提出的组合赋权方法计算的权重更加客观、合理。而职教云平台上，并没有将“学习时长”作为综合成绩考核指标，需要教师将各项成绩导出为EXCEL后自行进行计算，在此也建议职教云平台能将“学习时长”纳入综合成绩的考核指标体系中。
四 结论
为了解决混合式课堂教学过程性考核评价指标权重设置的盲目性和强主观性，本文以职教云SPOC平台的《地理信息技术》混合式教学课程的平台数据为基础，提出了一种基于熵值法和层次分析法的组合赋权方法来确定评价指标的权重，该方法既能体现各指标的真实性和客观性，又能兼顾指标的重要性。本文还将“学习时长”新加入到了职教云SPOC平台的评价指标体系中，实验数据计算结果显示“学习时长”指标对学生综合成绩的区分度较高，权重仅次于“作业”指标。本研究不仅为线上线下混合式课堂教学过程性考核指标权重的设置提供了新的解决思路，而且也为职教云平台指标体系的优化提供了参考，具有一定的实用价值和参考意义。
参考文献
[1]教育部关于印发《教育信息化“十三五”规划》的 通 知[DB/OL].http：//www.moe.gov.cn/srcsite/A16/s3342/201606/t20160622_269367.html.
[2]《高等职业教育创新发展行动计划（2015-2018年）》征求意见稿[DB/OL].http：//www.gov.cn/xinwen/2015-09/09/content_2927835.htm.
[3]国家中长期教育改革与发展规划纲要（2010-2020 年）[DB/OL]. http：//www.gov.cn/jrzg/2010-07/29/content_1667143.htm，2020-12-16.
[4]王芳，钱乐祥，谢学通，骆仁波，郭冠华.基于SPOC的地图学课程深度教学模式研究[J].大学教育，2020（12）：100-102.