前面已经提到评价中心对人才测评方法有一定的依赖性,研究者把评分者对于被评价者的评分不止基于评分维度,还受到人才测评方法影响的现象称作测评方法效应(exercise effect,此效应较大地影响了 评价中心的区分效度。测评方法效应产生的主要原因为:
首先,评分 者的信息加工能力有限,评分者在评分时难免会出现误差。
第二,评 分者往往需要依据被评价者表现出的同样的行为,同时在几个能力 维度上为其打分,而且,在不同的人才素质测试方法中,同一评分维度又可能 有着不同的定义和解释。
第三,设计者对于评分维度的定义往往流于 宽泛,不够具体和操作化,这就更增加了评分的难度。
第四,评价中心 技术是由几种不同的人才素质测评方法组成的,因此评分者的评分很容易受 到测试方法的影响,而很难按照统一的评分维度进行评价。
最后,评价中心的实施是按照不同的人才测评方法来组织的,因此评分者们也就不得不按照测评方法,而不是维度,来对行为信息进行加工和编码, 这也就造成了测评方法效应。
基于以上原因,研究者提出了避免测评方法效应,改善评价中心区分效度的建议:
①减少评分者信息加工 量,帮助评分者更加有效地加工信息。
②为各个评分维度提供更加清 晰、详细的解释。
③使评分者按照评分维度(而非人才测评方法)来加工、 组织和评价自己获得的信息。