多面Rasch模型在结构化面试中的应用.pdf

万方数据

多面Rasch模型在结构化面试中的应用堆孙晓敏1薛刚2引言是一个或多个考官与一个求职者之间在有限时间内行为等方面的特征，这些特征将用于预测求职者在工作绩效、培训、晋升、任期等方面的指标[2】。面试按标准化程度可分为：结构化面试、半结构化和非结方式、评委构成、程序、评分标准及结果的分析评价试误差的研究。Wagner曾总结道：面试的信度和效面试误差的来源有很多方面：面试题目的有效性、面试实施的各个环节、面试评委的培训、面试记分维度的设定以及面试评分量表的设计等等。具体而言，信息偏好【51等等。关于面试误差的这些研究结果意味着评分往往在一定程度上反映的是面试过程的特征或者考官个人的评分技能，而不完全是被试与标准化，从而使得考官尽可能在相同的工作相关信11．1面试及其误差近年来，人事测评在人员招聘中正发挥着越来越重要的作用，测评的科学性与实用性也越来越得到人们的认可。在各种主要的测评技术中，面试已经成为人员招聘中使用最为广泛的方法⋯。面试的人际互动，旨在鉴别求职者的知识、技能、能力和未来工作上的成功。对这种成功的操作性定义包括构化面试三种。所谓结构化面试是指面试的内容、等构成要素，按统一制定的标准和要求进行的面试‘31。随着面试技术的普遍使用，出现了大量关于面度或许存在高度的情境特异性和考官特异性[4】。对面试研究的总结反复提到下述评分误差：对比效应"J、与我类似效应、第一印象偏差、晕轮效应、考官刻板印象、顺序效应【6]、考官对考生的个人感情、工作相关的特征。因此，这种来自情境的误差变异损害了面试的潜在效度和效用【_川。1．2面试误差的控制为了降低面试过程中的情境误差，提高实际面试的效度和信度，研究者从三个方面做了大量工作。第一个方面是关注面试的内容、获取信息的维度的息的基础上对考生进行评价，最终提高评分的一致性。例如，不断提高面试过程的结构化，确保提问的一致性，将提问限制在与工作相关的问题上，并且对考生反应的评价也结构化。第二个方面是重视考官心理学报2008，40(9)：1030—1040摘要使用项目反应理论中的多面Rasch模型，对66名考生在结构化面试中的成绩进行分析，剔除了由于评委等具体测量情境因素引入的误差对原始分数的影响，得到考生的能力估计值以及个体水平的评分者一致性信息。对基于考生能力估计值和考生面试分得到的决策结果进行比较，发现测量误差的确对决策造成影响，对个别考生的影响甚至相当巨大。进一步使用Facets偏差分析以及评委宽严程度的Facets分析追踪误差源。结果表明，将来自不同面试组的被试进行面试原始成绩的直接比较，评委的自身一致性和评委彼此之间在宽严程度上的差异均将导致误差。研究表明，采用Facets的考生能力估计值作为决策的依据将提高选拔的有效性。同时，Facets分析得到的考生个体层次的评分者一致性指标，以及评委与考生的偏差分析等研究结果还可以为面试误差来源的定位提供详细的诊断信息。关键词结构化面试；项目反应理论；多面Rasch模型分类号B841．7DOI：10．3724／SP．J．1041．2008．01030(1北京师范大学心理学院，应用实验心理北京市重点实验室。北京100875)(2Kennedy02138，USA)收稿日期：2007—10—09·2007—2008年度北京市教委重点实验室规划项目。通讯作者：孙晓敏，E．mall：[e-mail]，电话：010—58802101ActaPsychologicaSinicaSchoolGovemment，HarvardUniversity，MA1030of
万方数据

109f≥I_曰。一Di—c：『一吒logl击}_曰。一Di的发展。越来越多的研究者尝试使用现代测量学的概化理论(Generalizability成。误差项越大，观测值的信度就越低。但是，C1rr分析。由于这类评分者一致性系数属于事后检验，面试情境中的推广，因此，Kendall和谐系数等CTI'弥补crI-r和GT的缺陷提供了新的思路。对概率对其能力值(或潜在特质)的回归曲线。与由丹麦数学家Rasch独立开发的单参数Rasch模型Di是项目f的难度(江1，2，⋯，L)的能力、项目的难度，而且受到评委的宽严程度、评这样的情境，如果不仅能确定项目的难度、评委的宽严程度，而且还能估计出考生独立于特定项目难度和特定评委宽严程度的能力值，这对于提高测验的P耐似，)是考生／'t在项目i上被评委歹评定为kDi是项目i的难度参数(江1，2，⋯，￡)C，是评委，的宽严程度(，=1，2，⋯，．，)独立的参数。这些参数的估计值统一用logits作为培训。通过培训，使考官熟悉各种可能的评分误差，帮助他们在信息收集和解释的过程中认识并尽力消除这类误差。除了上述两种方法，近年来，随