情景评价与情景判断测验的研究进展与总结

在研究文献综述的基础上，我们对以往情景评价及情景判断测验的研究状况和研究进展进行了总结。从总体上看，在1990年以来在情景评价测验研究方面取得了很大的进展，主要体现在以下几个方面：

（1）对情景判断测验的测量属性进行了实证的检验

情景判断测验作为人事选拔与评价的一种非常具有潜力的测验方法，对于它的测量属性以往研究进行了很多的检验（Motowidlo，Dunnette，Carter，1990；Weekley，Jones，1997；Schmitt，Chan，1997；Weekley，Jones，1999；Clevenger et al，2001；Ployhart，Ryan，2000），这些研究为情景判断测验的信度和效度提供了很多的实证支持。这些研究从几个不同方面消除了以往对情景判断测验的信度及其效度方面的疑虑，通过重测信度研究，对情景判断测验的信度水平进行了检验，并提出内部一致性信度评价方法在运用于情景评价时的局限性和值得注意的一些问题；通过情景判断测验的效标关联效度研究，积累了很多的效度证据；而Clevenger，et al（2001）关于情景判断测验增量效度的研究发现情景判断测验有相对于认知能力测验的增量效度，是人事选拔与评价中非常具有价值的测验形式。

（2）明确了情景判断测验的特点所在和开发程序

从情景判断测验的研究和论述来看，它主要包括低度仿真性、工作关联性和情景多样性等特征。以往研究已经表明与认知能力等测验相比，情景判断测验具有低不利影响和高测验公平性（Motowidlo et al，1990；Pulakos，Schmitt，1996）；Chan，Schmitt等人的研究则支持了情景判断测验具有高表面效度（Chan，Schmitt，DeShon，Clause， Delbridge，1997；Ployhart，Ryan，2000；Smither，et al，1993）；而情景判断测验的高绩效关联性则得到了更多研究的支持。由于工作关联性是情景判断测验的一个关键特征，也正因为如此，为情景判断测验的开发带来了复杂性和难度。以往研究基本上确立了情景判断测验的标准开发程序，认为情景判断测验的开发过程主要包括关键事件调查、情景试题编写、项目形成和权重确定几个部分。并对情景判断测验开发过程的一些关键技术问题进行了充分的探讨，为保证情景判断测验的效度提供了技术支持。

（3）从情景评价测验方法研究向更多关注测量构思倾斜

情景评价测验的构思效度是目前研究中比较薄弱的一个方面，在以往研究中进行了很多的探讨。就情景判断测验而言，情景判断测验与认知能力测验、个性测验以及工作经验测量之间均存在一定程度的相关。Weekley等在情景判断测验的诺莫网络构思验证中则更多的把个性特征、工作经验以及认知能力看出是影响情景判断测验得分的前因变量，认为管理者在情景判断测验上的得分受这些因素共同影响。

在情景判断测验构思效度的争论中，最多的是关于情景判断测验到底是测量了Sternberg等提出的内隐知识单一构思，还是测量了多维构思这一点。从目前的研究来看，更多的研究者支持情景判断测验测量了多维构思的观点。(www.xing528.com)

在最新的人事选拔与评价研究中，随着研究思路的变迁，越来越多的研究者更加开始关注测验所测量的构思。Hollenbeck，et al（2003）等提出在目前人事选拔的研究趋势中，非常重要的一条是围绕构思来进行人事选拔研究，关注怎么样更好的评价有意义的构思。在这种思路的影响下，一些研究者对情景评价测验的开发和研究思路进行了重新思考，提出了构思导向的情景评价测验研究思路。这为进一步研究情景评价测验的构思效度提供了有力的方法论支持。

（4）从效标关联效度研究向效度影响因素及其增量效度研究转变

从国外有关情景评价研究来看，早期的研究更多的关注情景评价的效标关联效度，从近期看，越来越多的研究希望能够对影响情景评价测验效度的因素进行探讨，其中包括测验开发模式对效度的影响；测验呈现方式（纸笔呈现还是视频呈现）对效度的影响；以及测验的指导语形式对测验效度影响等等。McDaniel等关于情景判断测验效度的分类元分析研究系统的对情景判断测验效度影响因素进行了总结，认为工作分析和效度研究类型对情景判断测验的效标关联效度有着重大的影响。

同时，随着研究者对情景评价测验效用的关注以及组合测验的广泛应用，对于情景判断测验增量效度的研究也取得了可喜的结果。有关情景判断测验增量效度的研究支持了情景判断测验作为人事选拔与评价测验的独特价值。

（5）逐渐开始关注情景评价研究中的过程因素和模型构建

从研究的总体情况来看，以往研究对情景评价过程的关注是不够的，除了Chan，Schmitt等对情景评价测验的效度知觉及其效度知觉与被试反应间的关系进行过一些探讨之外，很少有研究涉及情景评价测验的过程。此外，随着对情景评价测验测量构思的关注以及结构方程技术的发展，最近情景评价相关研究也更加关注结构方程模型的构建和比较检验。

从总体上看，1990年以来，情景评价和情景判断测验研究取得了很大的进展，为进一步研究提出了很多新的方向和思路。