第二章教育测量的质量指标2效度.pptx
《第二章教育测量的质量指标2效度.pptx》由会员分享,可在线阅读,更多相关《第二章教育测量的质量指标2效度.pptx(49页珍藏版)》请在三一文库上搜索。
1、第二章教育测量的质量指标第二章教育测量的质量指标第二章教育测量的质量指标第二章教育测量的质量指标第二节效度第二节效度第二节效度第二节效度第二节效度第二节效度一、效度的概念一、效度的概念一、效度的概念一、效度的概念二、效度的统计学原理及其与信度的关系二、效度的统计学原理及其与信度的关系二、效度的统计学原理及其与信度的关系二、效度的统计学原理及其与信度的关系三、效度的估计三、效度的估计三、效度的估计三、效度的估计四、提高效度的方法四、提高效度的方法四、提高效度的方法四、提高效度的方法一、效度的概念一、效度的概念效度(效度(ValidityValidity)是指是指测量结果测量结果的的准确性准确性和
2、和有效有效性性的的程度程度,亦即测量是否达到了预期的目的。,亦即测量是否达到了预期的目的。第一,效度是一个相对的概念。第一,效度是一个相对的概念。1.1.测量的效度始终是对一定的测量目的而言的。测量的效度始终是对一定的测量目的而言的。2.2.测量的效度是相对于测量的结果而言的。测量的效度是相对于测量的结果而言的。第二,一种测验的效度只是高或低的问题。第二,一种测验的效度只是高或低的问题。第三,在教育测量中,效度问题比在其他领域的第三,在教育测量中,效度问题比在其他领域的测量中更为重要。测量中更为重要。一、效度的概念一、效度的概念这是因为:这是因为:教育测量的对象大多是精神现象,只能通过对其具教
3、育测量的对象大多是精神现象,只能通过对其具有可测性的外部表现(如语言或动作等)的测量,以有可测性的外部表现(如语言或动作等)的测量,以间接认识其心理活动、心理特征或知识水平等。间接认识其心理活动、心理特征或知识水平等。学生的心理活动、心理特征与其外部表现之间,一学生的心理活动、心理特征与其外部表现之间,一般仅具有相关关系而无函数关系,外部行为并不能准般仅具有相关关系而无函数关系,外部行为并不能准确无误地反映某种心理状态。确无误地反映某种心理状态。教育测量的对象不是物而是有主观能动性的人。人教育测量的对象不是物而是有主观能动性的人。人能有意识地调节自己的外部行为,掩盖自己的内心活能有意识地调节自
4、己的外部行为,掩盖自己的内心活动,这就增加了认识其精神现象的难度。动,这就增加了认识其精神现象的难度。二、效度的统计学原理及其与信度的关系二、效度的统计学原理及其与信度的关系1 1、效度的统计学原理、效度的统计学原理在实际测量中,影响效度的主要因素是系统误差。在实际测量中,影响效度的主要因素是系统误差。因而在讨论效度时,还必须把真分数方差分解为两因而在讨论效度时,还必须把真分数方差分解为两个部分,一是潜在真分数方差(个部分,一是潜在真分数方差(V V2 2),另一部分),另一部分是系统误差分数方差(是系统误差分数方差(I I2 2),它与由随机误差引,它与由随机误差引起的变异(起的变异(E E
5、2 2)不同。)不同。2 2、效度与信度的关系、效度与信度的关系V2I2E2V2I2E2V2I2E2根据公式(根据公式(2-22-2)和()和(2-32-3),可将效度与信度的关),可将效度与信度的关系图解于后:系图解于后:根据分析,可得结论如下根据分析,可得结论如下:1)1)高信度是高效度的必要条高信度是高效度的必要条件,而非充分条件。件,而非充分条件。2)2)效度系数不会大于信度系数的效度系数不会大于信度系数的平方根。平方根。可以用下式表示:可以用下式表示:高效度、高信度高效度、高信度低效度、高信度低效度、高信度低效度、低信度低效度、低信度三、效度的估计三、效度的估计效度估计就是多方寻找证
6、据来证明一个测效度估计就是多方寻找证据来证明一个测验的有效性程度的过程。验的有效性程度的过程。19741974年美国心理学会发行的教育和心理年美国心理学会发行的教育和心理测量的标准一书将效度分为三大类:测量的标准一书将效度分为三大类:内内容效度、效标关联效度和结构效度。容效度、效标关联效度和结构效度。(一)内容效度(一)内容效度(Content Content validityvalidity)又称合理效度或逻辑程度,是指测验内容又称合理效度或逻辑程度,是指测验内容或行为取样的代表性和适当程度;或行为取样的代表性和适当程度;即即测验测验的内容范围、材料与所要测量的内容范围、的内容范围、材料与所
7、要测量的内容范围、教育目标是否相符合;测验中测题所引起教育目标是否相符合;测验中测题所引起的行为是否是所要测量的属性的明确反应;的行为是否是所要测量的属性的明确反应;测验的结果是否是一个有代表性的行为样测验的结果是否是一个有代表性的行为样本。本。估计内容效度的方法:估计内容效度的方法:估计内容效度的方法:估计内容效度的方法:(1 1)逻辑分析的方法。)逻辑分析的方法。其工作思路是请有关专家对测其工作思路是请有关专家对测验题目与原定内容范围的吻合程度作出判断。验题目与原定内容范围的吻合程度作出判断。(2 2)统计分析法。从同一个教学内容总体中抽取两套统计分析法。从同一个教学内容总体中抽取两套独立
8、的平行测验,用这两个测验来测同一批被试,求其独立的平行测验,用这两个测验来测同一批被试,求其相关。若相关高,表明测验内容效度较高;若相关低,相关。若相关高,表明测验内容效度较高;若相关低,表示测验的内容效度较低。表示测验的内容效度较低。采用求统计量的公式进行计算,其公式有以下三种形式:采用求统计量的公式进行计算,其公式有以下三种形式:内容效度主要应用于成就测验、学科测验、选拔和分类内容效度主要应用于成就测验、学科测验、选拔和分类职业测验。职业测验。内容效度不适合用于能力倾向和人格测验。内容效度不适合用于能力倾向和人格测验。(二)效标关联效度(二)效标关联效度又可称为经验效度或统计效度,是以测验
9、分数和又可称为经验效度或统计效度,是以测验分数和效标之间的相关系数来表示测验效度的高低的。效标之间的相关系数来表示测验效度的高低的。效标效标就是足以显示测验所欲测量的特性的变量或就是足以显示测验所欲测量的特性的变量或足以显示测验所欲预测的特性的变量。它是用来足以显示测验所欲预测的特性的变量。它是用来检验测验效度的外在的、客观的标准和尺度。检验测验效度的外在的、客观的标准和尺度。效标关联效度又可分为效标关联效度又可分为同时效度同时效度和和预测效度预测效度。(用全国高考的成绩作为效标来检验高中毕业生会考的(用全国高考的成绩作为效标来检验高中毕业生会考的成绩,计算两者之间的相关系数就是会考的同时效度
10、成绩,计算两者之间的相关系数就是会考的同时效度;而用大学一年级的成绩作为效标来检验高考的成绩,计而用大学一年级的成绩作为效标来检验高考的成绩,计算两者的相关系数就是高考的预测效度。)算两者的相关系数就是高考的预测效度。)估计效标关联效度可采用积差相关、二列相关或估计效标关联效度可采用积差相关、二列相关或点二列相关、四格相关和多元相关系数等计算各点二列相关、四格相关和多元相关系数等计算各种相关系数。种相关系数。1 1、用积差相关系数的方法估计效度、用积差相关系数的方法估计效度 积差相关积差相关,是计算两个变量线性相关的一种方法,由英国统计,是计算两个变量线性相关的一种方法,由英国统计学家学家皮
11、尔逊皮尔逊提出,因此也称为皮尔逊提出,因此也称为皮尔逊(Pearson)(Pearson)相关。要使用相关。要使用积差相关必须同时积差相关必须同时具备如下几个条件具备如下几个条件:两个变量都是由测量获得的连续性数据,即等距或等比数据。两个变量都是由测量获得的连续性数据,即等距或等比数据。两个变量的总体都呈正态分布,或接近正态分布,至少是单两个变量的总体都呈正态分布,或接近正态分布,至少是单峰对称分布,当然样本并不一定要正态。峰对称分布,当然样本并不一定要正态。必须是成对的数据,而且每对数据之间是相互独立的,即各必须是成对的数据,而且每对数据之间是相互独立的,即各自互不影响,本条件是难以检验的。
12、自互不影响,本条件是难以检验的。两个变量之间呈线性关系。一般用描绘散点图的方式来观察,两个变量之间呈线性关系。一般用描绘散点图的方式来观察,最好是先各自转化为最好是先各自转化为Z Z分数,单位会统一些。分数,单位会统一些。例:例:某中学数学教研组的教师积多年的教学法经验,认为刚入某中学数学教研组的教师积多年的教学法经验,认为刚入高中的学生学习立体几何感到困难的主要原因是空间想像力高中的学生学习立体几何感到困难的主要原因是空间想像力弱。弱。为了证明这个论点,他们让刚入高中的为了证明这个论点,他们让刚入高中的103103名学生作名学生作1010道道题,测量其空间想像力。为避免知道了某些学生的刚入高
13、中题,测量其空间想像力。为避免知道了某些学生的刚入高中时的成绩影响以后考试的评分,试卷暂不评阅。立体几何学时的成绩影响以后考试的评分,试卷暂不评阅。立体几何学完后,进行考试,按得分多少把成绩分为五等(完后,进行考试,按得分多少把成绩分为五等(A A、B B、C C、D D、E E)分别得)分别得5 5、4 4、3 3、2 2、1 1分。这时才评阅入学时的试卷,统分。这时才评阅入学时的试卷,统计出期末得计出期末得5 5、4 4、3 3、2 2、1 1分者在入学测验中分别答对分者在入学测验中分别答对1 1道题道题至至1010道题的人数(见表道题的人数(见表2-12-1)。)。就现有资料,用什么方法
14、可以判断教师们的意见是否正确就现有资料,用什么方法可以判断教师们的意见是否正确?表2-1:(答对的题数)1 2 3 4 5 6 7 8 9 10 所评的等级ABCDE54321 1 3 10 5 4 2 1 6 8 8 4 3 1 2 4 5 9 8 3 111 3 2 1 11 1 2 1 1解:(1)设期末考试的等第为y,空间想像力测验答对的题数为x,列出二重交叉次数分布表:X(答对的题数)1 2 3 4 5 6 7 8 9 10 Y所评的等级ABCDE54321 1 3 10 5 4 2 1 6 8 8 4 3 1 2 4 5 9 8 3 111 3 2 1 11 1 2 1 12531
15、3296合计2 4 10 14 20 20 17 9 5 2103(2)用积差相关系数公式计算效度系数:二列相关二列相关适用于两个变量就其实际含义而言是适用于两个变量就其实际含义而言是等距或等比数据,它们服从正态分布,等距或等比数据,它们服从正态分布,其中一列人为地划分为两类。其中一列人为地划分为两类。点二列相关点二列相关 适用于一列数据为等距或等比且总体服从正态分布(实适用于一列数据为等距或等比且总体服从正态分布(实际上只需要单峰对称分布,如分布),另一列变量是际上只需要单峰对称分布,如分布),另一列变量是按事物的性质划分为两类的变量,也可以是一个双峰分按事物的性质划分为两类的变量,也可以是
16、一个双峰分布,人为划分为两类,如文盲与非文盲。这种相关系数布,人为划分为两类,如文盲与非文盲。这种相关系数多用于测验中评价题目的区分度。对选择题、判断题在多用于测验中评价题目的区分度。对选择题、判断题在整个测量中作用作出判断。整个测量中作用作出判断。基本计算公式:基本计算公式:例:有一位教师自编了一套测验题,用来预测学生例:有一位教师自编了一套测验题,用来预测学生一年后的某科成绩,自编测验按百分制评分,一年一年后的某科成绩,自编测验按百分制评分,一年后考试评分只把学生分为及格者和不及格者。试就后考试评分只把学生分为及格者和不及格者。试就所获资料估计自编测验的预测效度。所获资料估计自编测验的预测
17、效度。解:解:1)1)把两次测验成绩成对排列:把两次测验成绩成对排列:被试者被试者1 12 23 34 45 56 67 78 89 91010 11 11121213131414自编测验自编测验的成绩的成绩(X X)6767 10 10 20 44 60 43 61 10 26 23 30 18 35 23 20 44 60 43 61 10 26 23 30 18 35 23一年后考一年后考试成绩试成绩(Y Y)1 1 1 0 0 1 1 0 1 0 0 1 1 11 1 1 0 0 1 1 0 1 0 0 1 1 12)计算出二列相关公式所需统计量计算出二列相关公式所需统计量:(三)结构
18、效度(三)结构效度(Construct validityConstruct validity)结构效度结构效度是指一个测量能实际测量出理论上的构想或是指一个测量能实际测量出理论上的构想或心理特性的程度。它的目的在于从心理学的理论观点心理特性的程度。它的目的在于从心理学的理论观点就测验的结果加以解释和探讨。就测验的结果加以解释和探讨。这里的这里的结构结构的含义是心理学理论所涉及的抽象而属假的含义是心理学理论所涉及的抽象而属假设性的概念、构想、特性或变量,如智力、焦虑、机设性的概念、构想、特性或变量,如智力、焦虑、机械能力倾向、成就、动机等。械能力倾向、成就、动机等。结构效度主要用于智力测验、人格
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 第二 教育 测量 质量指标 效度
