新YCT二级考试效度研究——以新YCT二级样卷为例

摘要

效度研究一直以来都是语言测试研究的一个重点。在汉语官方考试中，新中小考生汉语测试(Youth Chinese Test，简称YCT)覆盖面越来越广，参加的考生日益增多，而对该考试进行效度研究的成果还未见到。本研究基于新的效度观，选取新YCT二级考试，从测试使用者的角度在美国罗德岛的两所开设汉语的中学收集了来自测试内部和外部的多方面证据:包括测试信度、测试内容及结构、组间比较、效标（教师评价）以及考生的态度等。研究发现：⑴信度方面，该测试整体、听力和阅读分测试以及大部分题型的信度系数较理想。⑵测试内容和结构方面，测试总体覆盖了内容大纲中的语言功能和词汇;听力部分分数和阅读部分分数呈中等显著相关，说明考察的是不同的能力;从测试的表面效度来看大部分考察的是大纲要考察的内容。⑶从组间比较来看，测试能较好区分在美国每周学习5小时、连续学习两个学期、总课时160课时以下的初级学习者的汉语水平;也能够较好地区分不同学校考生的汉语水平。⑷从问卷调查中考生对题型的态度看，考生认为新YCT各部分时间设置较为合适，有的考生认为示例理解有一些困难，图片和拼音对他们理解问题有较大帮助，且考试内容与课本相关性不高，但贴近日常生活，试题属于较为真实性的试题。多数考生认为为了备考YCT，需要进行一些训练，但看法差别较大。此外，本文还发现，题型的难易度与考生分数相关;题型的趣味性与考生分数相关不显著且相关值很低;而考察度则与听力部分的成绩相关。⑸来自效标关联效度的证据看，教师评价与YCT二级测试成绩的相关系数很高且显著，也证明该测试成绩能较好地区分水平不同的学习者。总体而言，YCT二级测试能够有效测量出在非目的与环境中学习了160学时以下考生的汉语水平。不过，该测试也有个别题型区分度不显著，难度较低;听力和阅读部分有个别语言功能没有涉及或涉及很少;此外，测试不能较好地区别汉语水平较高的学习者的能力，但这符合测试设计者的初衷。根据研究结果，本研究对YCT考试提出了建议。
　　 本研究采用统计分析、问卷调查以及访谈等不同方法多角度收集效度证据，较为全面地考察了新YCT二级考试的效度，并对该考试今后的发展提出了建议。然而由于条件所限，调查样本不够大，未能使用一些其他统计方法，也未能从更多的方面搜集证据。在今后的研究中，可以收集范围更广、容量更大的样本进行研究，也可以对其他三个级别的测试进行研究，从更多的方面搜集效度证据并使用其他统计方法进行分析。此外，测试题目的社会公平性问题(Differential ItemFunctioning，DIF)也有待考察。

目录

声明

摘要

第一章 引言

第一节 语言测试的效度研究

第二节 YCT的概况

第三节 美国中小学学习汉语的人数日益增长

第四节 YCT在美国的情况

第五节 新YCT考试二级效度研究的必要性

第六节 本文章节内容介绍

第二章 效度以及国内第二语言测试效度相关研究

第一节 效度的研究

2．1．1 效度的概念

2．1．2 效度观的发展

2．1．3 效度的证据和验证方法

第二节 国内语言教学界效度实证研究

2．2．1 外语考试效度的实证研究

2．2．2 汉语作为第二语言考试效度实证研究

第三章 研究方法

第一节 新YCT二级考试简介

第二节 研究问题与研究思路

第三节 研究对象

第四节 研究工具

第五节 数据收集

第六节 数据整理与分析

第七节 研究步骤

第四章 研究过程、结果与讨论

第一节 试卷的信度

第二节 来自测试内容和结构的证据

4．2．1 试卷与考试大纲的比较

4．2．2 试卷的结构

4．2．3 试卷的表面效度

第三节 来自组间比较的证据

4．3．1 不同级别考生成绩描述性统计与分析

4．3．2 两所高中考生成绩描述性统计与分析

第四节 来自问卷中学生对测试态度的证据

4．4．1 问卷的信度

4．4．2 问卷内部一致性分析

4．4．3 问卷的描述性统计与分析

4．4．4 难易度、趣味性和考察度

第五节 来自效标的证据

第五章 结论

第一节 主要内容和成果

第二节 不足之处

第三节 对该测试未来发展的建议

第四节 将来的研究

参考文献

附录

附件1 新YCT二级考试样卷

附件2 问卷

附件3 访谈提纲

附件4 考生成绩及教师评价等级

致谢