1、,教育测量与评价的效度,效度的概念 效度的统计定义 效度的类别,目 录,效度的概念,效度是指一个测验或量表实际能测出其所要测量的特性的程度。,效度是针对一定测量目的而言的看一项活动的有效性如何,就是看它能达到最初目的的程度。效度只有程度上的差异正常情况下,测量不会“完全有效”或“完全无效”,概念的理解,效度是针对测量结果而言的,只有测量结果真实、正确反映了测量的特性,才能认为测量是较为有效的或者说效度高的,评价一个测量是否有效,要多角度、 多方面的收集证据,概念的理解,效度验证系统考察测验项目的内容,拿被试分数与其他独立测量结果进行比较,分析测验所测的心理特性的结构和性质等方法效度验证的分类:
2、,被试的观察分数(X),测量效度实质上就是指一次测量测出目标真分数的程度,效度的统计定义,测量的目的是要最大限度的区分被试水平,也就是要使 变大,同时使 变小,使 变大。 越大表明测量的质量越高,即测量的效度越高。所以,可以把效度定义为目标真分数方差和观察分数方差的比值,效度的统计定义,内容效度结构效度效标关联效度,效度的类别,含义以及应用范围: 内容效度指测验题目样本对于应测内容与行为领域的代表性程度 主要应用于教育测量(尤其是学业成就测验)的情境,也适用于某些用于选拔和分类的职业测验分析方法 逻辑分析法 -依据教材内容、教学大纲的范围以及教学目标分析测验内容,检查测验内容究竟在体现教材内容
3、和教学目标方面达到多大程度 -对每一道题目逐一进行审查,以此形成“题目双向细目表” -与“命题双向细目表”加以对照,以确定试卷的效度,内容效度,验证步骤: 提出有关理论结构的说明,并据此设计测量用的试题 提出可以验证该理论结构存在的假设说明 采用各种方法收集实际的材料,以验证第二步提出的假设的正确性 收集其他类型的辅助证据,淘汰与理论结构相反的试题,或是修正理论,并重复第二和第三步,直到上述的假设得到验证,即测验的结构效度获得支持为止。,结构效度,结构效度是指一个测量能实际测量出理论上的构想或心理特性的程度。它的目的在于从心理学的理论观点就测验的结果加以解释和探讨。主要用于智力测验、人格测验等
4、一些心理测验方面。,结构效度的验证方法,测验内部寻找证据法 内容效度 (有些测验对所测内容或行为范围的定义或者解释类似于理论构想的解释,所以内容效度高也说明结构效度高) 作答过程分析 (非目标因素的影响) 测验的同质性 (测验所测的是单一的特质还是由多种特质构成的复合体) 因素分析法,结构效度,考察测验的实证效度法 差异被试比较法理论上有差异的被试,通过比较测验结果判断能否有效地被区分,且差异方向一致 先后测试分析法对于测量那些理论上比较稳定的心理品质的测验,可以采用此种方法。,结构效度,效标关联效度是指特定情境中的个体行为进行预测时的有效性(也称实证效度),分类: 同时效度测验分数与效标资料的取得大约在同一时间内连续完成,计算这两种资料的相关系数即代表测验的同时效度。 诊断现状 预测效度在测验分数取得一段时间后才获得效标资料,计算这两种资料的相关系数即代表测验的同时效度。预测某个个体将来的行为,效标关联效度,效标关联效度的估计方法,相关法测验分数与效标测量的相关系数 积差相关、等级相关、点二列相关、二列相关、列联相关等显著差异法根据效标测量将被试分为两个极端组,检验这两组测验分数是否具有统计学上的差异显著性,效标关联效度,谢谢,