一个测验要具备较好的内容效度必须满足两个条件。
1.要确定好内容范围,并使测验的全部项目均在此范围内。所谓内容范围可以是具体知识或技能,也可以是复杂行为。成就测验的主要目的在于测量学生的学习效果,因此非凡重视内容效度。
2.测验项目应是已界定的内容范围的代表性样本。换句话说,就是选出的项目能包含所测的内容范围的主要方面,并且使各部分项目所占比例适当。具体做法是对内容范围进行系统分析,将该范围划分为具体纲目,并对每个纲目作适当加权,然后根据权重,从每个纲目中随机取样。
确定内容效度的方法
- 1.专家判定法
确定测验内容效度常用的方法是由专家对测验项目与所涉及的内容范围进行符合性判定,这是一种定性分析的方法。对于成就测验来说,学科专家要先对教学大纲或教材有全面了解,然后与测验题目进行系统比较,看题目是否能代表所规定的内容。具体方法步骤如下:
①定义好内容总体,并描绘出有关知识与技能的轮廓;
②划分细纲目,并根据重要性规划好各个纲目的加权比例,作出尽可能具体的描述;
③确定每道题所测的知识与技能,将自己的分类与测验编制者的纲目作比较;
④制订评定量表,从各方面对测验作出评定。
- 2.复本法
克伦巴赫认为,内容效度可由一组被试在取自同样内容范围的两个测验复本上得分的相关来作数量上的估计。假如相关低则说明两个测验中至少有一个缺乏内容效度,但无法确定究竟哪一个缺乏内容效度。当相关高时,一般推论测验具有内容效度,但也可能出现两个测验有相同偏差的情况。
- 3.再测法
先将测验施测于被试,由于被试对测验内容了解甚少,因而得分较低,然后对他们进行教学练习,结束时再测一次,假如成绩提高很大,则说明测验对于教学具有较高的内容效度。
- 4.经验法
不同的被试团体在测验上的得分和对每题的反应存在较大差异,一般说,高年级比低年级的水平要高,假如总分和题目的通过率随着年级而增高,则说明测验对于教学具有内容效度。
内容效度的应用
作为一种方法,内容效度较为适合于评价教育成就测验和职业选拔测验。在这种测验中,测验内容应是知识、技能和实际工作的代表性样本。内容效度不仅是评价教育成就测验和职业选拔测验的较好方法,而且也是编制任何测验都应加以考虑的基本方面。内容效度对标准参照测验更为重要,因为在标准参照测验中我们主要关心的是被试对一定范围内的知识、技能把握得如何。
在实际应用中,内容效度轻易与表面效度相混淆。所谓表面效度指的是外行人从表面上看测验是否有效。表面效度不是效度的客观指标,它不能真正反映测量的有效程度,但是它能影响被试的动机,从而影响测验的效果。所以在编制测验时,表面效度是一个必须考虑的问题。
内容效度既具有一定的优点,也有一定的局限。它的主要缺点是缺乏可靠的数量指标,因而妨碍了各测验间的相互比较。