论文部分内容阅读
摘 要: 外语教学评价是提高外语教学质量的重要途径,而评价信息的信度直接关系到评价的可靠性。因此,在收集评价信息时一定要保证其信度,只有这样才能为教学提供准确的评价信息,增强教学效果。
关键词: 外语教学 评价材料 信度
在对外语教学进行评价时,我们通常采用定质性(质性)和定量性(量性)信息。质性信息有助于我们确定某一特别任务,而量性信息能帮助我们选择适当的难度。定质信息和定量信息没有明显的区别,许多评估中两者都是并存的。通常来说,信息的种类越多,越能提高评价的准确性。
所有信息,无论是质性还是量性,都针对的是事物的特征:学生或教师,课本或录像带,文章或短信,黑板或教学管理者。对所有信息我们都应该十分清楚且准确把握,避免误解。学生语法知识的信息不同于学生使用语言的信息。即便如此,许多教师、学生及家长还是经常把第一种信息当做第二种。
信息的质量是至关重要的。无论我们采取什么方法收集信息,都必须始终关注用于评估的信息的质量。信度和效度是信息质量的两个方面。信度是指信息的一惯性和穩定性,信度是指信息的相关程度。信度和效度是判别信息质量的关键。同时,在收集评价信息时还要注意采用数据的实用性,在此我们主要探讨外语教学评价中信度的收集问题。
一、信度的定义
信度指测验结果的一致性、稳定性及可靠性,一般多以内部一致性表示该测验信度的高低。信度系数愈高即表示该测验的结果愈一致、稳定与可靠。系统误差对信度没什么影响,因为系统误差总是以相同的方式影响测量值的,因此不会造成不一致性。反之,随机误差可能导致不一致性,从而降低信度。常见的影响信度的因素有三个方面:第一,与评价者的不稳定性有关;第二,与评价对象的不稳定性有关;第三,与信息的收集过程有关。弄清楚了影响信度的主要因素,我们就应该努力减少这种影响,提高信度。
二、提高信度
三个影响信度的因素不存在哪个比哪个好或者坏的问题。我们总是想要得到尽可能大的信度,而幸运的是,有一些方法能够帮助我们实现愿望。通常考虑如何加强信度总是从排除不可信因素出发的,换句话说,就是减少可能对评估的稳定性、一致性产生不良影响的因素。
与评价者有关的信度可以通过对评价者进行信息收集过程的培训,让他们亲自参加收集过程,准确了解如何获得所需的信度等方法提高信度。此外,不论何时,如果可能,使用一个以上的观察者、面试者、阅卷人就是明智的,他们还应该不受他人的影响独立地进行观察、面试、批阅作文。
与评价对象有关的信度,即对学生表现的评估可能会受到诸如学生不在状态或者没有准备好,疲劳或者精力分散,受其他不可控制因素的干扰等特殊状况的影响;评估者在评价学生表现时不在最佳状态而没能全身心关注学生的表现,不详尽或不相一致的记录等影响。正因为如此,对该学生的评价和所做的教学计划就会基于这些不准确的信息,从而使评价出现偏差。因此,对外语学习者进行评价时,要收集学生在不同场景下的表现和成绩并使用不同的收集方法,避免使用学生在一个场景中的表现作为评价学生的唯一依据。
与收集过程有关的信度可以通过多渠道收集信息而得到提高。因为用一种方法收集的信息的偏差可能会被用其他方法收集到的信息弥补。例如,外语学习者如果被要求在同学们面前证明他们的所学时,他们往往就会感到很困难,但当他们与老师在一起时他们表现起来可能会觉得轻松自如。由此可见,如果只用一种方法评估学生的表现就可能产生不可信的结果。
提高信度包括减少评价者、评价对象、评价过程的非正常因素的影响,但并不是所有的因素对评估的准确性的影响程度是相同的。比如,当进行多项选择测试时,我们没有必要对评卷人信度给予太大的关注,但当我们对学生进行口语测试或者面试时,就应该十分重视这类信度。而在评估学生交际能力时,我们必须关注与人或目标相关的信度,因为他们的表现可能会因时间不同和心理状态不同而波动。如果我们要评价写作中语言的复杂性,与目标相关的信度就可以忽略不计,因为我们不必担心文章会随时发生变化。
三、信度的计算
信度实际上是一种程度。我们不可能获得完全的信度,即百分之百的信度,也不可能得到完全没有信度的信息,即信度为零。事实上,信度始终在0.00—1.00,而我们永远也不可能到达两极。
信度是一种持续的品质,不会随评价者的兴趣而变化。通常评价者不会对个别学生的学习成绩感兴趣,他们感兴趣的是全班或者全年级的成绩。让人遗憾的是,我们不可能知道信息或者收集数据的过程的真实可信度,因为我们不知道所要评价的对象的真正状态。实际上,我们只是估计信息或者收集信息过程的信度。估计信度的方法有好几种,绝大多数所得的数据在0.00没有信度和完全信度1.00之间。这就叫信度的相关性。
四、信息的收集方法
外语教学评价需要收集大量的教的信息(教学目的、教学计划、教学实践),学生的信息(学生需求、个人背景、语言阅历、学习成绩、学习态度和感受),教师信息(语言经验、语言技巧、教学态度),学校信息(学校的教学和人力资源)等。可以采取不同的方法收集不同的信息。考试可以用来收集学生学习成绩方面的信息但不能用来收集其他方面的信息,而其他的数据收集方法却适合于收集这些信息。比如,课堂观察和学生会议可收集到学生在阅读和学习中使用的策略;对话记录能说明学生课堂学习的态度;学校记录、课程档案或其他资料能说明学校的管理和人力资源情况,也能说明教学本身。
有些信息的收集是直接的不需要特别准备的,比如,查看学校记录和教学资料。在这种情况下,我们就可以了解到与此相关的信息并进而了解其内容。其他方法,比如档案袋法、会议法、调查问卷法需要事先准备并有一定的程序。
我们不必在任何时候都用所有方法收集信息,而是要决定哪个或者哪几个是某一特定场景下能使我们做出最合适的决定的最恰当的方法。何况,并不是所有的方法都适合我们所要收集的用于评价目的的信息。有些方法(比如,会议和日志)既可用于教学又可用于评价目的。因此,教师可以选用一些方法作为评价活动的一部分,而选用何种方法则要由他们的评价目的决定。
参考文献:
[1]Brian K.Lynch.Language Program Evaluation[M].Shanghai:Shanghai Foreign Language Education Press,2001.
[2]Fred Genesee Johna A.Upshur.Classroom-based Evaluation in Second Language Education[M].Beijing:Foreign Language Teaching and Research Press,2005.
[3]James Dean Brown.The Elements of Language Curriculum:A Systematic Approach to Program Development[M].Foreign Language Teaching and Research Press,2001.
关键词: 外语教学 评价材料 信度
在对外语教学进行评价时,我们通常采用定质性(质性)和定量性(量性)信息。质性信息有助于我们确定某一特别任务,而量性信息能帮助我们选择适当的难度。定质信息和定量信息没有明显的区别,许多评估中两者都是并存的。通常来说,信息的种类越多,越能提高评价的准确性。
所有信息,无论是质性还是量性,都针对的是事物的特征:学生或教师,课本或录像带,文章或短信,黑板或教学管理者。对所有信息我们都应该十分清楚且准确把握,避免误解。学生语法知识的信息不同于学生使用语言的信息。即便如此,许多教师、学生及家长还是经常把第一种信息当做第二种。
信息的质量是至关重要的。无论我们采取什么方法收集信息,都必须始终关注用于评估的信息的质量。信度和效度是信息质量的两个方面。信度是指信息的一惯性和穩定性,信度是指信息的相关程度。信度和效度是判别信息质量的关键。同时,在收集评价信息时还要注意采用数据的实用性,在此我们主要探讨外语教学评价中信度的收集问题。
一、信度的定义
信度指测验结果的一致性、稳定性及可靠性,一般多以内部一致性表示该测验信度的高低。信度系数愈高即表示该测验的结果愈一致、稳定与可靠。系统误差对信度没什么影响,因为系统误差总是以相同的方式影响测量值的,因此不会造成不一致性。反之,随机误差可能导致不一致性,从而降低信度。常见的影响信度的因素有三个方面:第一,与评价者的不稳定性有关;第二,与评价对象的不稳定性有关;第三,与信息的收集过程有关。弄清楚了影响信度的主要因素,我们就应该努力减少这种影响,提高信度。
二、提高信度
三个影响信度的因素不存在哪个比哪个好或者坏的问题。我们总是想要得到尽可能大的信度,而幸运的是,有一些方法能够帮助我们实现愿望。通常考虑如何加强信度总是从排除不可信因素出发的,换句话说,就是减少可能对评估的稳定性、一致性产生不良影响的因素。
与评价者有关的信度可以通过对评价者进行信息收集过程的培训,让他们亲自参加收集过程,准确了解如何获得所需的信度等方法提高信度。此外,不论何时,如果可能,使用一个以上的观察者、面试者、阅卷人就是明智的,他们还应该不受他人的影响独立地进行观察、面试、批阅作文。
与评价对象有关的信度,即对学生表现的评估可能会受到诸如学生不在状态或者没有准备好,疲劳或者精力分散,受其他不可控制因素的干扰等特殊状况的影响;评估者在评价学生表现时不在最佳状态而没能全身心关注学生的表现,不详尽或不相一致的记录等影响。正因为如此,对该学生的评价和所做的教学计划就会基于这些不准确的信息,从而使评价出现偏差。因此,对外语学习者进行评价时,要收集学生在不同场景下的表现和成绩并使用不同的收集方法,避免使用学生在一个场景中的表现作为评价学生的唯一依据。
与收集过程有关的信度可以通过多渠道收集信息而得到提高。因为用一种方法收集的信息的偏差可能会被用其他方法收集到的信息弥补。例如,外语学习者如果被要求在同学们面前证明他们的所学时,他们往往就会感到很困难,但当他们与老师在一起时他们表现起来可能会觉得轻松自如。由此可见,如果只用一种方法评估学生的表现就可能产生不可信的结果。
提高信度包括减少评价者、评价对象、评价过程的非正常因素的影响,但并不是所有的因素对评估的准确性的影响程度是相同的。比如,当进行多项选择测试时,我们没有必要对评卷人信度给予太大的关注,但当我们对学生进行口语测试或者面试时,就应该十分重视这类信度。而在评估学生交际能力时,我们必须关注与人或目标相关的信度,因为他们的表现可能会因时间不同和心理状态不同而波动。如果我们要评价写作中语言的复杂性,与目标相关的信度就可以忽略不计,因为我们不必担心文章会随时发生变化。
三、信度的计算
信度实际上是一种程度。我们不可能获得完全的信度,即百分之百的信度,也不可能得到完全没有信度的信息,即信度为零。事实上,信度始终在0.00—1.00,而我们永远也不可能到达两极。
信度是一种持续的品质,不会随评价者的兴趣而变化。通常评价者不会对个别学生的学习成绩感兴趣,他们感兴趣的是全班或者全年级的成绩。让人遗憾的是,我们不可能知道信息或者收集数据的过程的真实可信度,因为我们不知道所要评价的对象的真正状态。实际上,我们只是估计信息或者收集信息过程的信度。估计信度的方法有好几种,绝大多数所得的数据在0.00没有信度和完全信度1.00之间。这就叫信度的相关性。
四、信息的收集方法
外语教学评价需要收集大量的教的信息(教学目的、教学计划、教学实践),学生的信息(学生需求、个人背景、语言阅历、学习成绩、学习态度和感受),教师信息(语言经验、语言技巧、教学态度),学校信息(学校的教学和人力资源)等。可以采取不同的方法收集不同的信息。考试可以用来收集学生学习成绩方面的信息但不能用来收集其他方面的信息,而其他的数据收集方法却适合于收集这些信息。比如,课堂观察和学生会议可收集到学生在阅读和学习中使用的策略;对话记录能说明学生课堂学习的态度;学校记录、课程档案或其他资料能说明学校的管理和人力资源情况,也能说明教学本身。
有些信息的收集是直接的不需要特别准备的,比如,查看学校记录和教学资料。在这种情况下,我们就可以了解到与此相关的信息并进而了解其内容。其他方法,比如档案袋法、会议法、调查问卷法需要事先准备并有一定的程序。
我们不必在任何时候都用所有方法收集信息,而是要决定哪个或者哪几个是某一特定场景下能使我们做出最合适的决定的最恰当的方法。何况,并不是所有的方法都适合我们所要收集的用于评价目的的信息。有些方法(比如,会议和日志)既可用于教学又可用于评价目的。因此,教师可以选用一些方法作为评价活动的一部分,而选用何种方法则要由他们的评价目的决定。
参考文献:
[1]Brian K.Lynch.Language Program Evaluation[M].Shanghai:Shanghai Foreign Language Education Press,2001.
[2]Fred Genesee Johna A.Upshur.Classroom-based Evaluation in Second Language Education[M].Beijing:Foreign Language Teaching and Research Press,2005.
[3]James Dean Brown.The Elements of Language Curriculum:A Systematic Approach to Program Development[M].Foreign Language Teaching and Research Press,2001.