样本团体
效度往往是通过对样本团体的测验分数进行各种分析而得到的,所以样本团体的性质也会对测验的效度产生影响。这种影响体现在以下3个方面。
(1)同一个测验对不同的团体测量的功能可能是不同的。例如,同一个算术测验,对于能力较差的应试者可能测量的是数学推理能力,但对于能力较强的应试者,可能测量的只不过是对以前所学内容的回忆能力和计算能力。在评价效度时,我们要力求使样本团体的性质与所要测量的团体的性质尽量相似,这样求得的测验效度才会较高。
(2)对于同一个测验,样本团体的性质不同,效度也会有较大的差别。样本团体的性质包括年龄、性别、教育水平、智力水平、动机水平、职业等有关特性。同一个测验对不同性质的团体可能有不同的预测能力,因此我们将这些对测验的效度产生影响的因素称为干涉变量。例如,对出租车司机实施能力倾向测验后发现,测验成绩与司机的工作成绩的相关仅为0.20,这是相当低的预测效度,但是当把对开车有兴趣的司机抽取出来单独计算效度时,却发现效度为0.60。这说明该测验虽然对所有司机的工作成绩没有预测能力,但对于“有工作兴趣的司机”这一亚团体却有较好的绩效预测能力。在这个例子中,兴趣就是一个干涉变量。
在进行效度分析时,必须将影响效度大小的干涉变量找出来。美国测量学家吉谢利(E.E. Chiselli)提出了一种确定干涉变量的方法,其步骤如下。
• 用回归方程求得团体的预测效标分数,将其与实际效标分数相比较,可以得到差数D,如果D的绝对值很大,说明测验中可能存在干涉变量。
• 根据样本团体的构成选择不同的对照组进行分析,分别计算效度,从而找出干涉变量。
• 根据干涉变量将想要测量的团体分为高预测性和低预测性两个亚团体,高预测性团体获得的测验的效度较高。
(3)样本团体的异质性对效度也会有影响。用相关系数表示的效度系数会受到样本团体分数分布的影响。如果其他条件相同,那么样本团体越同质,效度越低;反之,效度越高。