信度的估计方法专题培训课件.ppt

77信度的信度的估计方法估计方法(90)(90)学习目标：1.1.理解重测信度、复本信度、内部一理解重测信度、复本信度、内部一致性信度以及评分者信度的含义及致性信度以及评分者信度的含义及使用条件；使用条件；2.2.了解各种信度指数的计算公式；了解各种信度指数的计算公式；如上一节所述：一个测验的两个平行形式之间的相关系数就是该测验的信度。实践中我们可以通过构建平行测验来计算测验的信度。从这一结论出发，人们找到了平行测验的各种替代形式，相应地也推导出计算信度系数的替代性方法，与这些替代形式相应的信度分别有：重测信度、复本信度、内部一致性信度、评分者信度；信度的种类重测信度复本信度内部一致性信度评分者信度重测信度复本信度内部一致性信度评分者信度test-retest reliability对同一被试样本在一定时间间隔里用同一量表施测两次所得结果的一致性程度。代表能够将测验分数概括到不同时间的程度。重测信度复本信度内部一致性信度评分者信度重测信度虽然最为直接地代表了信度的内涵，但并非所有的心理测验都适合计算重测信度。重测信度的误差来源包括：测验本身所测的特性不稳定；被试的成熟、学习、练习和遗忘的效果并非人人等量增长；某次施测时偶发因素，如计时错误、情绪波动、健康状况、动机变化等；重测信度的使用条件：1.所测量的心理特质必须是相对稳定的；2.测量中不能有练习效应和遗忘效应；3.不能存在差别学习的效果；重测信度复本信度内部一致性信度评分者信度重测信度的使用条件：1.所测量的心理特质必须是相对稳定的；重测信度复本信度内部一致性信度评分者信度重测信度的使用条件：2.测量中不能有练习效应和遗忘效应，或者练习和遗忘效应基本可以互相抵消；重测信度复本信度内部一致性信度评分者信度重测信度的使用条件：3.不能存在差别学习的效果，即两次施测期间被试的学习效果没有差别；重测信度复本信度内部一致性信度评分者信度重测信度的计算公式：皮尔逊积差相关系数重测信度复本信度内部一致性信度评分者信度重测信度的计算公式：皮尔逊积差相关系数10名学生幸福感调查的两次施测分数名学生幸福感调查的两次施测分数重测信度的计算重测信度的计算ABCDEFGHIJ161513131110109871616141211911867X1X2重测信度复本信度内部一致性信度评分者信度Alternate-form reliability同一被试样本在同一测验的两种形式上得分的一致性程度。又称等值性信度。代表能够将测验分数概况到不同测验形式的程度。重测信度复本信度内部一致性信度评分者信度复本信度的误差取决于两种测验形式是不是严格平行测验，或者说是不是严格的等值：测题取样是否匹配？格式是否相同？内容、题数、难度、平均数、标准差是否一致？另外，被试方面情绪波动、动机变化，以及测验情景的变动，偶发因素的干扰都会引起测验误差；复本信度的使用条件：1.施测所用的两个复份必须是真正平行的测验(即A、B卷);2.被试要有条件接受两个测验;重测信度复本信度内部一致性信度评分者信度复本信度的使用条件：1.施测所用的两个复份必须是真正平行的测验(即A、B卷);重测信度复本信度内部一致性信度评分者信度复本信度的使用条件：2.被试要有条件接受两个测验;注意:(1)排除施测顺序的影响;(2)在报告结果时，应报告两次施测的间隔、及在此间隔内被试的有关经历;重测信度复本信度内部一致性信度评分者信度复本信度的计算公式：皮尔逊积差相关系数 10名学生创造力的复本测验结果复本信度的计算复本信度的计算ABCDEFGHIJX1X2201918181716141212102020191616171211139重测信度复本信度内部一致性信度评分者信度在重测信度和复本信度原理的基础上，把这两种方法加以综合应用就可以产生另外一种信度估计方法，得到再测-复本信度，或者称为稳定-等值信度(stability and equivalent reliability)如果两个复本测验是相距较长一段时间分两次施测的，同一组被试施测结果的一致性程度。课前提问：何谓重测信度，要满足那些条件时，使用重测信度才是有意义的？何谓复本信度，使用复本信度的前提有哪些？重测信度复本信度内部一致性信度评分者信度Internal consistency reliability指的是测验内容的一致性或测验内部所有题目的一致性(项目同 质 性)程 度。又 称 同 质 性(homogeneity)信度。主要反映测验或分测验的单维性。当被试在测验中表现出跨项目的一致性时，就称测验具有项目同质性。即各个测题得分为正相关时，即为同质，相关为零时则为异质；重测信度复本信度内部一致性信度评分者信度注意：1.适用于同质性测验，而不适用于异质性测验;2.不适用速度测验;3.估计内在一致性系数的方法通常有两类：一类是分分半半法法，另外一类方法需要对项目反应的方差或协方差进行分析。重测信度复本信度内部一致性信度评分者信度分半信度(split-half reliability)是指将一个测验分成对等的两半后，所有被试在这两半上所得分数的一致性程度。常见的分半方法是按测题序号奇偶分半：测验题目按某种顺序（如难度）排列；如果是随机排列的题目，则必须是所有题目是平等的(要么难度相等，要么性质一致，是测同一个心理特质的)；如果测验有多个分量表，应在分量表内部排好顺序，再把各分量表的两半组合起来求相关；重测信度复本信度内部一致性信度评分者信度分半信度(split-half reliability)是指将一个测验分成对等的两半后，所有被试在这两半上所得分数的一致性程度。计算方法：1.确定分半方法2.计算两半相关系数3.利用公式校正把测验分成两半的方法除了奇偶法之外，还有随机安置法、内容匹配法、难度奇偶排序法等等；每一种划分方法产生的分半信度估计值都有差别。即分半信度估计不具备惟一性。重测信度复本信度内部一致性信度评分者信度库德(Kuder)-理查逊(Richardson)方法。K-R20公式(仅适用于以1、0记分)K-R21公式(适用于以1、0记分，各题难度近似)或或GOGO重测信度复本信度内部一致性信度评分者信度多值记分测验的内部一致性系数计算方式：克伦巴赫(Cronbarch)系数(系数)荷伊特(S.Hoyt)信度重测信度复本信度内部一致性信度评分者信度scorer reliability指多个评分者给同一批人的答卷进行评分的一致性程度。两人评分时：积差相关或等级相关；多人评分时：肯德尔和谐系数；如有A、B、C三位专家给6位应聘者的面试评分，结果如下，试求评分者信度。ABC175664529072603816354460604258475636969066ABCRi154514222373454134666185332861113=14+7+13+18+8+3=63 =142+72+132+182+82+32=811 由题意知由题意知K=3,N=6,将上述值代入公式有将上述值代入公式有:W=0.95如在评定中有相同的等级时，用下式校正。其中如在评定中有相同的等级时，用下式校正。其中n为为相同等级的个数相同等级的个数信度误差变异来源重测信度时间取样复本信度(连续施测)内容取样复本信度(间隔施测)时间与内容取样分半信度内容取样同质性信度内容取样和内容的异质性评分者信度评分者间的差异各种信度系数相应误差变异的来源:重测信度复本信度内部一致性信度评分者信度信度系数与信度指数信度指数：相关系数信度系数：相关系数的平方注意：（1）信度系数有多种;（2）同一种信度系数也会因样本、测查时间不同而有多个;（3）信度系数只是对测量分数一致性的估计，但并没有指出不一致的原因;（4）获得较高的信度只是测验有效的必要条件;重测信度复本信度内部一致性信度评分者信度例 奇偶分半法如一个学生对如一个学生对10道题回答为道题回答为(正确答案标记为，正确答案标记为，错误答案标记为错误答案标记为)：1.2.3.4.5.;6.7.8.9.10.;这个学生的总分为这个学生的总分为5分，分，3个奇数题正确，个奇数题正确，2个偶数个偶数题正确。题正确。表表4.3 54.3 5名被试测验结果名被试测验结果被试被试奇数题得分奇数题得分偶数题得分偶数题得分A32B55C44D11E45BACK满足等值性时满足等值性时,使用使用斯皮尔曼布朗公式斯皮尔曼布朗公式(Spearman-Brawn)(Spearman-Brawn)不满足等值性时不满足等值性时,使用使用弗拉南根弗拉南根(Flanagan(Flanagan)公式公式卢伦（卢伦（RulonRulon）公式）公式表表4.4 4.4 初一学生地理成绩测验内在一致性信度系数计算表初一学生地理成绩测验内在一致性信度系数计算表 BACK1BACK2