兼顾非统计约束的双目标CD--OMST组卷方法的研究

摘要

作为一种兼具计算机化自适应测验（CAT）和计算机多阶段自适应测验（MST）优点的测验形式，在线组卷的计算机多阶段自适应测验（OMST）不仅可以根据被试能力和非统计约束需要进行即时组卷，还允许被试在模块内回顾、修改作答。OMST降低了被试的测验焦虑，从而使收集到的数据更为真实合理，并使参数估计结果更符合被试的真实水平。在教育和心理测量领域，能同时提供被试宏观能力和微观认知状态的认知诊断自适应测验（即双目标CD-CAT）越来越受到学者们的青睐。　　考虑到双目标测验对被试测量的全面性和OMST测验的上述优点，本文将双目标的测验目的运用于兼顾非统计约束的CD-OMST中，开发了一种兼顾非统计约束的双目标CD-OMST测验形式。然而，已有的组卷方法并不适用于兼顾非统计约束的双目标CD-OMST，且大部分方法存在非统计约束情境适用性不足的问题。鉴于此，本研究开发了5种兼顾非统计约束的双目标CD-OMST组卷方法：Dual-MPI、Dual-OP、Dual-RMPI、Dual-WDM以及Dual-ORMPI-BC。其中，前四种方法的开发思路是基于已有的组卷方法，通过优化统计约束部分获得；而Dual-ORMPI-BC方法的开发思路则是基于已有的组卷方法，通过同时优化非统计约束和统计约束两部分获得。为验证新方法在双目标的CD-OMST测验中的可行性及探讨非统计约束的适用情境，本研究在两种不同的非统计约束情境下，采用了Monte Carlo模拟研究方法进行研究，研究还进一步探讨了测验的长度以及测验的阶段数对新方法性能的影响。模拟研究结果表明：　　（1）从双目标CD-OMST的测量精度来看，在仅有下限的非统计约束情境中，Dual-ORMPI-BC和Dual-RMPI两种方法的测量精度最高，Dual-WDM方法次之，Dual-MPI方法最差；在上下限皆有的非统计约束情境中，Dual-ORMPI-BC和Dual-WDM方法测量精度最高，Dual-OP方法表现较差。　　（2）从题库的安全性来看，在仅有下限的非统计约束情境中，Dual-MPI方法的表现最好，Dual-ORMPI-BC方法次之，Dual-WDM方法最差；在上下限皆有的非统计约束情境中，Dual-OP方法的表现最好，Dual-ORMPI-BC方法次之，Dual-WDM方法最差。　　（3）从非统计约束条件的违背情况来看，在仅有下限的非统计约束情境中，Dual-ORMPI-BC方法的违背率和违背数量远低于其他组卷方法，表现最好，Dual-RMPI方法的表现次之，Dual-WDM方法的表现最差；而在上下限皆有的非统计约束情境中，Dual-ORMPI-BC方法的表现仍旧最好，Dual-OP方法次之，Dual-WDM方法的表现仍然是最差的。　　综上所述，虽然每种方法在不同评价标准下有各自的优势，但综合来看，Dual-ORMPI-BC组卷方法是一种在测验精度、题库安全性、非统计约束条件的违背情况等方面都是表现最佳的，且该方法克服了原有方法在非统计约束情境上适用性不足的问题。

目录

声明

引言

1文献综述

1.1 在线组卷的计算机化多阶段自适应测验简介

1.2 认知诊断计算机化自适应测验简介

1.3 CD-OMST

1.4 小结

2 研究问题与研究设计

2.1 问题的提出与研究意义

2.2 研究内容

2.3 研究的特色与创新

3研究一：兼顾非统计约束的双目标CD-OMST组卷方法的开发

3.1 研究目的

3.2 兼顾非统计约束的双目标CD-OMST组卷方法的开发--基于统计约束视角

3.3 兼顾非统计约束的双目标CD-OMST组卷方法的开发--基于统计约束和非统计约束视角

4研究二：在仅有下限的非统计约束情境下四种新组卷方法的可行性研究及比较

4.1 实验目的

4.2 实验设计

4.3 模型

4.4 Monte Carlo模拟

4.5 非统计约束要求

4.6 评价指标

4.7 研究结果

4.8 小结与讨论

5研究三：在上下限皆有的非统计约束情境下三种新组卷方法的可行性研究及比较

5.1 研究目的

5.2 研究设计

5.3 研究结果

5.4 小结与讨论

6总结与讨论

6.1 研究总结

6.2 讨论与展望

参考文献

致谢

在读期间公开发表论文（著）及科研情况