来华留学预科汉语考试作文评分研究--基于概化理论和多面Rasch模型

摘要

为了探究来华留学生预科汉语教育结业汉语综合统一考试的作文评分信度,本研究采用概化理论和多面Rasch模型分析5名评分员对120篇实考作文样本的评分情况。概化理论的研究表明:考生能力是得分总变异的最大来源,一位评分员进行评分时,其结果即可达到可接受的概化系数;两位评分员进行评分时,信度系数提高的幅度最大,因此应保持目前的双评状态。多面Rasch模型的分析显示:评分量表基本能区分考生能力,评分员的严厉性差异显著,存在对高水平考生偏严而对低水平考生偏宽松的趋势,个别评分员自身一致性较差。