多面Rasch模型在结构化面试中的应用_孙晓敏.pdf

心理学报2008,40(9):1030~1040
ActaPsychologicaSinicaDOI:10.3724/SP.J.1041.2008.01030

多面Rasch模型在结构化面试中的应用*

12
孙晓敏薛刚
(1北京师范大学心理学院,应用实验心理北京市重点实验室,北京100875)
(2KennedySchoolofGovernment,HarvardUniversity,MA02138,USA)

摘要使用项目反应理论中的多面Rasch模型,对66名考生在结构化面试中的成绩进行分析,剔除了由于评委
等具体测量情境因素引入的误差对原始分数的影响,得到考生的能力估计值以及个体水平的评分者一致性信息。
对基于考生能力估计值和考生面试分得到的决策结果进行比较,发现测量误差的确对决策造成影响,对个别考生
的影响甚至相当巨大。进一步使用Facets偏差分析以及评委宽严程度的Facets分析追踪误差源。结果表明,将来
自不同面试组的被试进行面试原始成绩的直接比较,评委的自身一致性和评委彼此之间在宽严程度上的差异均将
导致误差。研究表明,采用Facets的考生能力估计值作为决策的依据将提高选拔的有效性。同时,Facets分析得到
的考生个体层次的评分者一致性指标,以及评委与考生的偏差分析等研究结果还可以为面试误差来源的定位提供
详细的诊断信息。
关键词结构化面试;项目反应理论;多面Rasch模型
分类号B841.7

面试误差的来源有很多方面:面试题目的有效性、面
1引言
试实施的各个环节、面试评委的培训、面试记分维度
1.1面试及其误差的设定以及面试评分量表的设计等等。具体而言,
近年来,人事测评在人员招聘中正发挥着越来对面试研究的总结反复提到下述评分误差:对比效
越重要的作用,测评的科学性与实用性也越来越得应[5]、与我类似效应、第一印象偏差、晕轮效应、考
到人们的认可。在各种主要的测评技术中,面试已官刻板印象、顺序效应[6]、考官对考生的个人感情、
[1]
经成为人员招聘中使用最为广泛的方法。面试信息偏好[5]等等。关于面试误差的这些研究结果
是一个或多个考官与一个求职者之间在有限时间内意味着评分往往在一定程度上反映的是面试过程的
的人际互动,旨在鉴别求职者的知识、技能、能力和特征或者考官个人的评分技能,而不完全是被试与
行为等方面的特征,这些特征将用于预测求职者在工作相关的特征。因此,这种来自情境的误差变异
未来工作上的成功。对这种成功的操作性定义包括损害了面试的潜在效度和效用[7]。
[2]
工作绩效、培训、晋升、任期等方面的指标。面试1.2面试误差的控制
按标准化程度可分为:结构化面试、半结构化和非结为了降低面试过程中的情境误差,提高实际面
构化面试三种。所谓结构化面试是指面试的内容、试的效度和信度,研究者从三个方面做了大量工作。
方式、评委构成、程序、评分标准及结果的分析评价第一个方面是关注面试的内容、获取信息的维度的
等构成要素,按统一制定的标准和要求进行的标准化,从而使得考官尽可能在相同的工作相关信
[3]
面试。息的基础上对考生进行评价,最终提高评分的一致
随着面试技术的普遍使用,出现了大量关于面性。例如,不断提高面试过程的结构化,确保提问的
试误差的研究。Wagner曾总结道:面试的信度和效一致性,将提问限制在与工作相关的问题上,并且对
度或许存在高度的情境特异性和考官特异性[4]。考生反应的评价也结构化。第二个方面是重视考官

收稿日期:2007-10-09
*2007-2008年度北京市教委重点实验室规划项目。
通讯作者:孙晓敏,E-mai:[e-mail],电话:[phone]
1030
9期孙晓敏等:多面Rasch模型在结构化面试中的应用1031

培训。通过培训,使考官熟悉各种可能的评分误差,得以迅速发展,各种符合实际需要的新模型不断涌
帮助他们在信息收集和解释的过程中认识并尽力消现。IRT常用的有单参数、双参数和三参数模型。
除这类误差。由丹麦数学家Rasch独立开发的单参数Rasch模型
除了上述两种方法,近年来,随着现代测量理论以其统计上的优点和参数估计的便利性而著称。下
的发展,越来越多的研究者尝试使用现代测量学的面为单参数Rasch模型的函数表达式。

方法,通过统计校正,改进面试评分技术,提高面试Pni
log=Bn-Di
信度和效度。1-Pni

在引入现代测量理论之前,面试分析的方法经Pni是考生n正确作答项目i的概率

历了经典测量理论(ClassicalTestTheory,CTT)和1-Pni是考生n答错项目i的概率

概化理论(GeneralizabilityTheory,GT)两个阶段。Bn是考生n的能力(n=1,2,,,N)