公务员面试考官自身评分一致性研究

摘要

公务员选拔是政府能力建设的重要内容。世界各国都非常重视公务员能力建设，并把公务员能力建设作为政府治理能力提升的重要途径，通过完善公务员选拔录用制度来加强公务员能力建设以提高政府治理能力。我国政府历来非常重视公务员选拔，先后出台了一系列法律、法规，明确规定了公务员选拔的原则、组织与实施、工具与操作方法，将结构化面试作为公务员选拔考试的核心技术，对面试的组织、命题、操作流程、考官管理等问题做出了明确的规定。
　　在既定的政策和框架范围内，学者和实践工作者在公务员选拔工具的开发、应用和效度检验方面进行了积极的探索，研究的重点从面试的评价转向考官评分的个体差异。国外研究者探讨了考官评分决策过程，力求从考官个人特征、考官的评分心理行为、考生和面试情景等多个角度分析考官评分差异产生的原因。在项目反应理论的指导下，国内研究者采用多面Rasch模型的Facets软件输出考官自身评分一致性来表示考官评分的个体差异，发现考官评分一致性存在人口统计学变量上的个体显著差异。考官自身评分一致性是指考官对不同考生前后一致地使用各个评分等级的程度。如果考官自身评分一致性程度属于合理范围，说明考官对考生使用了相同评分标准和评分等级，分数能够体现能力差异。因此，完善考官自身评分一致性对于提高面试的信度和效度、发挥面试的人才选拔功能具有重要的理论和实践价值。面试评分是一种复杂的心理活动，所以仅仅从人口统计学特征分析考官自身评分一致性差异是不够的。
　　为了更加全面地探讨考官自身评分一致性差异产生的原因，参考国外考官评分决策过程研究的成果，本文构建了公务员面试考官自身评分一致性决策模型。首先，本文比较了项目反应理论和经典测量理论，说明考官评分与考官自身评分一致性之间的内在关联。其次，本文基于影响考官评分差异的文献，归纳后发现影响考官评分的因素与影响考官评分一致性的因素有共同之处。再次，基于决策理论和胜任力理论发现，影响考官评分的因素之间存在密切的关联，将面试考官多种评分心理行为与评分方式界定为考官评分策略之后，结合前景理论引入面试题本因素。最后，在多面Rasch模型的基础上将考官评分分解出考官自身评分一致性，在原有面试决策理论的基础上整合考官胜任力、评分策略、面试题本和考官评分，建立了公务员面试考官自身评分一致性决策模型。
　　在公务员面试考官评分决策模型框架内，本文构建了考官胜任力模型、对考官评分策略进行了测量，对影响考官的面试题本要素进行了量化，使影响考官自身评分一致性的因素变成了可测量的变量。利用2015年公务员面试考官调研取得的数据建立多项Logistic分析模型，对考官胜任力、人口统计学变量、评分策略、题本对考官自身评分一致性的影响进行实证分析和理论解释。
　　结论如下：
　　（1）考官胜任力方面。考官胜任力对考官自身评分一致性的影响取决于评分策略的组合；当考官评分策略既定时，提高考官胜任力有利于提高自身评分一致性的合理性。
　　（2）考官人口统计学特征方面。考官性别不影响考官自身评分过于一致或过于不一致的发生比；部分年龄段影响考官自身评分过于一致的发生比，考官年龄越大，自身评分过于不一致的发生比越低；学历不影响考官自身评分过于一致的发生比，考官学历越高，考官评分越倾向于过于不一致；工作单位性质对考官自身评分过于一致的发生比没有显著影响，对考官自身评分过于不一致的发生比有显著影响；担任考官次数影响考官自身评分过于不一致或过于一致的发生比，担任考官次数越多，考官评分越合理。
　　（3）在考官评分策略方面。锚定策略有利于抑制考官自身评分过于一致和过于不一致，使考官自身评分一致性趋向于合理；匹配策略有利于抑制考官自身评分过于一致，对评分过于不一致没有影响；调整策略使考官自身评分趋向于过于一致，对评分过于不一致没有影响。
　　（4）面试题本方面。与题本3相比，题本1提高了考官自身评分过于一致的发生比，也提高了过于不一致的发生比；题本2对考官自身评分过于一致的发生比没有影响，但提高了过于不一致的发生比。
　　在实证分析结论的基础上，本文针对如何提高考官评分一致性提出了如下对策。具体内容如下：构建基于考官自身评分一致性的考官评价和反馈、追踪体系；建立基于胜任力的考官选拔体系；从考官人口统计学特征上优化考官配置；建立基于胜任力和评分策略的培训体系；优化面试题本设计。
　　本文研究的内容在以下四个方面做出了创新。
　　第一，构建了公务员面试考官自身评分一致性决策模型，基于该模型更加全面、系统地分析了考官胜任力、考官人口统计学变量、评分策略、面试题本对考官自身评分一致性的影响。理论上，本文从决策理论出发，将考官胜任力、评分策略、题本和考官自身评分一致性纳入同一个分析框假，建立基于多项Logistic回归的二重调节效应模型，在原有的面试决策模型基础上增加了题本和评分策略对考官自身评分一致性的影响分析，扩展了面试决策理论。实践上，本文分析了考官胜任力、考官人口统计学变量、评分策略和题本对考官自身评分一致性的影响及作用机制，为对策的提出提供了证据支持。
　　第二，构建了公务员面试考官胜任力模型，“政治敏感性”和“政治认同”表明公务员面试考官胜任力具有政治属性，是公务员面试考官胜任力区别于其它类型考官胜任力的典型特征。理论方面，本文采用探索性因子分析和验证性因子分析归纳和提炼出考官胜任力由“个人特质”、“专业能力”和“专业知识”3个维度17个胜任力指标构成，并对它们之间的关系进行了深入探讨。相比以往从理论上分析公务员面试考官胜任力的研究，本文为其提供了经验证据，凸显了公务员面试考官胜任力的典型特征，为考官评分差异研究、面试信度和效度研究提出了一个新的分析框架，丰富和拓展了面试相关理论。实践上，本文的研究提出了公务员面试考官的胜任力指标，为公务员面试考官的选拔和培训提供了依据和指导，为完善现有的考官管理制度、提高公务员面试选拔的效果提供了有价值的参考。
　　第三，整合面试考官多种评分心理行为与评分方式，提出了评分策略的概念，“考官在评分过程中考虑考生的政治素质”说明政治性是公务员面试考官评分策略区别于其它类型考官评分策略的特殊属性。理论方面，本文将考官评分方式扩展为多维的考官评分策略，概括和提炼出公务员面试中考官采用的“锚定策略”、“调整策略”和“匹配策略”三维评分策略，并对其相互间的关系进行较为深入的探讨，寻求公务员面试考官评分策略的规律性及特殊性，从而丰富和拓展了面试相关理论。实践方面，本文编制了公务员面试考官评分策略问卷，指出考官评分策略的特点，回答了考官如何评分的问题，为识别考官评分策略、解释考官个体评分差异提出了分析视野，也为公务员面试考官的培训和选拔提供指导。
　　第四，对公务员面试题本要素进行量化，开发了面试题本要素问卷，利用访谈和扎根编码分析法实证研究了面试题本要素影响考官评分一致性的心理机制。理论方面，本文根据公务员面试题本的构成提炼了影响公务员考官评分一致性的题本要素，采用因子分析法提炼了“题目内容”和“评分标准”2个维度，在面试理论中补充了公务员面试题本要素这一新的研究对象。实践上，本文编制了《公务员面试题本要素问卷》，对公务员面试题本进行了量化，为实现面试题本对考官评分一致性的影响分析提供了工具，为公务员面试题本的优化提供了依据。

目录

声明

绪论

第一节研究背景与意义

第二节研究思路、研究方法与内容安排

第三节 本研究的创新之处

第一章 基础理论、文献综述与模型构建

第一节基础理论

第二节考官评分的文献综述

第三节影响考官自身评分一致性的因素分析与模型构建

第二章公务员面试考官自身评分一致性评价

第二节 公务员面试考官自身评分一致性的实证分析

第三章 公务员面试考官胜任力模型的维度与指标

第一节理论分析与研究评述

第二节公务员面试考官胜任力的提炼与预调研分析

第三节 公务员面试考官胜任力模型的构建

第四章 公务员面试考官评分策略的内容与构成

第一节理论分析与研究述评

第二节 公务员面试考官评分策略问卷的编制

第三节 公务员面试考官评分策略内容与结构的提炼

第五章 公务员面试题本要素的内容及评分一致性影响机制

第一节 理论分析与研究述评

第二节 公务员面试题本要素的内容分析

第三节公务员面试题本要素影响考官自身评分一致性的机制分析

第六章 考官胜任力、评分策略、面试题本影响面试考官自身评分一致性的实证分析

第一节研究设计

第二节考官胜任力、评分策略、面试题本与考官自身评分一致性的多项Logistic回归分析

第七章 研究结论及对策

第一节 实证分析结论及解释

第二节 改善考官自身评分一致性的对策

研究不足与研究展望

参考文献

在读期间科研成果

附录问卷

致谢