论文部分内容阅读
综合评价技术是社会统计重要的定量测度方法,已得到众多学者的研究。不过,综合测评的单一化现象、评价结论的非一致性、评价效果的保质性等问题仍是综合评价存在的重要问题。针对前两个问题尽管已有学者提出基于方法集成的组合评价和基于个体集成的群组评价等方法,但仍不尽人意;而对于评价质量的处理则主要集中在理论框架和有效性等定性论述。Meta分析是起源于循证医学研究的一种系统评价法,是对不同文献研究结果进行定量、科学的综合;可以将多个不同评价个体/方法的结果集成起来,不仅有助于克服单一化现象、解决结论非一致性问题,而且还能实现评价质量的量化综述。由此,本文基于循证医学的Meta分析理论,尝试建立适于社会科学的Meta分析综合评价方法,以期解决综合评价存在的单一化现象、结论非一致性、评价质量等问题。论文主要从不同文献研究结果的定量集成和对研究文献的质量评价等基本问题展开。首先,基于对Meta分析、综合评价基本方法的系统梳理,剖析了群组评价、组合评价方法的优缺点,提出基于社会科学的Meta分析综合评价思路。其次,建立了基于排序评价的Meta分析集成方法。第一,论证了基于排序评价结果可集成的必要条件。第二,针对排序评价结果,构建了基于价值排序的Meta分析离差最大化集成法和结果一致度修正法;基于名次排序的Meta分析Borda法、Copeland法和有向图修正法等集成模型。并通过实例验证了集成模型的优势性。再次,构建了基于Meta分析的综合评价质量测评体系。根据综合评价过程,分别探讨了框架搭建、指标设计、测评技术、评价结果的质量测评问题。以Meta分析的文献质量评价为参照,建立了基于定性评估表评价框架;提出基于Meta分析的全面性整合特性指标设计法;提出了ANOVA-MFA的测评技术。考虑了不同文献研究结果的差异来源,并测算了具体来源的差异大小。最后,将构建的基于Meta分析的集成和质量测评方法应用于大学排名结果的综合评价。针对当前形形色色大学排名评价结果存在的不一致问题,分析了国内8个主要排名系统、63个排行榜,构建了基于Meta分析的中国大学排名综合评价模型。测评了各排行榜之间的差异来源,测算了各排行榜之间的差异大小。根据四大综合性排行榜排序结果的集成分析,发现大学排名方法存在的问题并提出改进的对策建议。