论文部分内容阅读
概化理论以其动态性、预测性的信度研究视角,借用试验设计和分析、方差分量模型等统计工具,为复杂、现实的多维度测量提供了可靠的信度分析。随着心理与教育理论发展的深入,诸多心理与教育测评都是复杂的多特质多维度的测量,为适应多维度测量信度的要求,包容性更强、信息含量更大的多元概化理论(Multivariate Generalizability Theory)应运而生。多元概化理论的诞生在现代测量理论的发展中是具有里程碑意义的,是国际心理、教育测量领域的前沿课题。本研究探讨了这一先进而极富应用前景的现代测量理论模型,从多元概化理论的模型介绍,方差协方差分量的估计、解释,多元概化系数的计算,权重设定等方面较详尽地阐释了多元概化理论的内涵。 多元概化理论非常适用于多维度的心理测评情境,为此本研究选用了极富代表性的国家公务员录用结构化面试的多维测评数据进行实证研究,在实行公务员面试的某省直国家机关中随机抽取5个部门共114名被试(应考者),采用单变量概化分析和多元概化分析两项研究剖析了结构化面试的评分者信度。研究一将公务员结构化面试的五项测评要素作为固定侧面,分别对该侧面的五个水平进行单变量概化分析。研究二应用多元概化理论,对结构化面试五项测评要素上的综合评价进行评定误差分析和信度研究。两研究相比较,体现了多元概化分析较之单变量概化分析的优越性所在。 多元概化分析的结果包含了单变量概化分析的全部信息,而协方差分量为评分者信度研究提供了额外的信息,研究利用多维度测评中协方差构成的侧面信息,探讨了在不同测评要素上评分者一致性存在的协变关系,以及测评要素以某种方式构成的特定组合的概化性等,对评分误差、评分者信度进行了较深入的理论探讨;此外,多元概化系数为各单位现行结构化面试提供了整体的信度水平指标,并以崭新的视角建立了测量信度和效度之间的关联。同时本研究也为完善国家公务员录用面试的测量设计、规范实施程序提供了极为宝贵的资料和理论依据。