第二章 教育测量的质量指标2(效度).ppt

第二章教育测量的质量指标2(效度)
三、效度的估计
效度估计就是多方寻找证据来证明一个测验的有效性程度的过程。
1974年美国心理学会发行的《教育和心理测量的标准》一书将效度分为三大类:内容效度、效标关联效度和结构效度。
(一)内容效第二章教育测量的质量指标2(效度)
三、效度的估计
效度估计就是多方寻找证据来证明一个测验的有效性程度的过程。
1974年美国心理学会发行的《教育和心理测量的标准》一书将效度分为三大类:内容效度、效标关联效度和结构效度。
(一)内容效度(Contentvalidity)
又称合理效度或逻辑程度,是指测验内容或行为取样的代表性和适当程度;即测验的内容范围、材料与所要测量的内容范围、教育目标是否相符合;测验中测题所引起的行为是否是所要测量的属性的明确反应;测验的结果是否是一个有代表性的行为样本。
估计内容效度的方法:
估计内容效度的方法:
(1)逻辑分析的方法。其工作思路是请有关专家对测验题目与原定内容范围的吻合程度作出判断。
(2)统计分析法。从同一个教学内容总体中抽取两套独立的平行测验,用这两个测验来测同一批被试,求其相关。若相关高,表明测验内容效度较高;若相关低,表示测验的内容效度较低。
采用求统计量的公式进行计算,其公式有以下三种形式:
内容效度主要应用于成就测验、学科测验、选拔和分类职业测验。
内容效度不适合用于能力倾向和人格测验。
(二)效标关联效度
又可称为经验效度或统计效度,是以测验分数和效标之间的相关系数来表示测验效度的高低的。
效标就是足以显示测验所欲测量的特性的变量或足以显示测验所欲预测的特性的变量。它是用来检验测验效度的外在的、客观的标准和尺度。
效标关联效度又可分为同时效度和预测效度。(用全国高考的成绩作为效标来检验高中毕业生会考的成绩,计算两者之间的相关系数就是会考的同时效度;而用大学一年级的成绩作为效标来检验高考的成绩,计算两者的相关系数就是高考的预测效度。)
估计效标关联效度可采用积差相关、二列相关或点二列相关、四格相关和多元相关系数等计算各种相关系数。
1、用积差相关系数的方法估计效度
积差相关,是计算两个变量线性相关的一种方法,由英国统计学家皮尔逊提出,因此也称为皮尔逊(Pearson)相关。要使用积差相关必须同时具备如下几个条件:
①两个变量都是由测量获得的连续性数据,即等距或等比数据。
②两个变量的总体都呈正态分布,或接近正态分布,至少是单峰对称分布,当然样本并不一定要正态。
③必须是成对的数据,而且每对数据之间是相互独立的,即各自互不影响,本条件是难以检验的。
④两个变量之间呈线性关系。一般用描绘散点图的方式来观察,最好是先各自转化为Z分数,单位会统一些。
例:
某中学数学教研组的教师积多年的教学法经验,认为刚入高中的学生学习立体几何感到困难的主要原因是空间想像力弱。
为了证明这个论点,他们让刚入高中的103名学生作10道题,测量其空间想像力。为避免知道了某些学生的刚入高中时的成绩影响以后考试的评分,试卷暂不评阅。立体几何学完后,进行考试,按得分多少把成绩分为五等(A、B、C、D、E)分别得5、4、3、2、1分。这时才评阅入学时的试卷,统计出期末得5、4、3、2、1分者在入学测验中分别答对1道题至10道题的人数(见表2-1)。
就现有资料,用什么方法可以判断教师们的意见是否正确?
表2-1:
(答对的题数)
**********
所评的等级
A
B
C
D
E
5
4
3
2
1
1310542
1688431
2459831
13211
11211
解:(1)设期末考试的等第为y,空间想像力测验答对的题数为x,列出二重交叉次数分布表:
X(答对的题数)
**********
Y
所评的等级
A
B
C
D
E
5
4
3
2
1
1310542
1688431
2459831
13211
11211
25
31
32
9
6
合计
2410**********
103
(2)用积差相关系数公式计算效度系数:
二列相关
适用于两个变量就其实际含义而言是等距或等比数据,它们服从正态分布,其中一列人为地划分为两类。
点二列相关
适用于一列数据为等距或等比且总体服从正态分布(实际上只需要单峰对称分布,如T分布),另一列变量是按事物的性质划分为两类的变量,也可以是一个双峰分布,人为划分为两类,如文盲与非文盲。这种相关系数多用于测验中评价题目的区分度。对选择题、判断题在整个测量中作用作出判断。
基本计算公式:
例:有一位教师自编了一套测验题,用来预测学生一年后的某科成绩,自编测验按百分制评分,一年后考试评分只把学生分为及格者和不及格者。试就所获资料估计自编测验的预测效度。
解:1)把两次测