多项选择题认知诊断的计分方法、分类方法及应用研究

摘要

认知诊断的测验项目形式中，多项选择题（以下简称多选题）是最常用的测验项目形式之一。目前已有的认知诊断多选题是指选项多个但正确答案只有一个的选择题。本研究中的多选题指的选项多个正确选项也多个的具有中国考试特色的多项选择题。不同的测验对多选题的计分方式不同，得到的信息也不同，所以研究多项选择题认知诊断的计分方式十分必要。多选题的认知诊断测验可以更好的估计被试真实的掌握状态，但目前为止，却没有研究针对此题型开发出多选题认知诊断模型，也没有对于认知诊断多选题的计分方法进行研究。因此，本研究对多选题的认知诊断的计分方法、分类方法进行研究及应用。　　本研究共分为三部分，研究一主要探讨两种分析模型（按题目计分的I-DINA模型和按选项计分的O-DINA模型）在不同条件下（测验长度、测验质量、被试量）的表现；研究二主要探讨三种分析模型（按题目计分的I-DINO模型、按选项计分的O-DINO模型和O-DINAO模型）在不同条件下的表现；研究三编制了一个八年级上册物理科目多选题测验，对五种多选题认知诊断模型进行应用研究，比较五个多选题认知诊断模型及其计分方法、分类方法在实证数据中的表现。结果表明：　　（1）随着测验质量的下降，I-DINA模型、I-DINO模型、O-DINA模型、O-DINO模型和O-DINAO模型的模式判准率（PCCR）、属性判准率（ACCR）、平均属性判准率（AACCR）的结果均成下降趋势，说明模式判准率和属性判准率受项目参数的影响较大。　　（2）随着被试人数的增加，I-DINA模型、I-DINO模型、O-DINA模型、O-DINO模型和O-DINAO模型的猜测参数g与失误参数s更加接近真值。说明项目参数的估计受作答人数的影响，当作答人数增多时，项目返真值更好。　　（3）4属性条件下，不同被试、不同测验长度和不同测验质量的情况下，O-DINAO模型的评分估计结果与O-DINO模型一致，结果优于O-DINA模型，在本研究中更加推荐使用O-DINAO模型和O-DINO模型。　　（4）实证研究表明，本研究提出的O-DINAO模型相比其他四个模型参数估计精准度较高、模型资料拟合良好，在实际应用中推荐使用O-DINAO模型进行多项选择题认知诊断分析。

目录

声明

引言

1 文献综述

1.1研究背景

1.3多选题认知诊断测验

1.4多选题认知诊断测验的计分方法及分类方法

2 问题提出与总体研究设计

2.1 问题提出

2.2 研究的意义

2.3 研究的内容与设计

2.4本文的创新之处

3 研究一：按题目计分的I-DINA模型和按选项计分O-DINA模型的比较研究

3.1 两种计分方法和对应模型的引入思路

3.2研究目的

3.3研究设计

3.4研究结果

3.5研究小结

4 研究二：按题目计分的I-DINO模型和按选项计分的O-DINO、O-DINAO模型的比较研究

4.1 三种计分方法和对应模型的引入思路

4.2研究目的

4.3研究设计

4.4研究结果

4.5研究小结

5 研究三：实证数据下对五种多项选择题认知诊断模型计分方法的比较及应用

5.1研究目的

5.2研究方法

5.3研究设计

5.4研究结果

3.5研究小结

6 综合讨论

7结论与未来展望

7.1研究结论

7.2未来展望

参考文献

附录

致谢

在读期间公开发表论文（著）及科研情况