心理学中的各种信度和效度.doc

心理学中的各种信度和效度一、信度所谓信度，指的是测量结果的稳定性程度，其操作定义是，信度乃是一个测验X与它的任意一个“平行测验X的相关系数。无关因素、测验的长度、测验试题的区分度、被试团体的代表性都会影响信度。（一）重测信度1、定义：利用同一量表，让同一被试群体在不同时间两次施测之后的相关值。这一信度值表示的是测验结果的稳定性，故也称之为稳定性系数。2、形式：施测经过适当时间再施测3、举例：假设有一份主观幸福感调查表，先后两次施测于10名学生，时间间隔为半年，结果如下表所示，求该测验的重测信度。4、使用的前提条件（1）所测量的心理特质必须是稳定的。（2）遗忘和练习的效果基本上互相抵消。（3）在两次施测的间隔期内，被试在所要测查的心理特质方面没有更多的学习和训练。5、注意事项（1）有些测验不宜采用重测法估计信度，如测量推理和创造力的测验。那些不易受重复使用影响的测验才能用再测法估计信度。如感觉运动测验、人格测验。（2）两次测验间隔的时间要适当，并注意提高被试的积极性（3）测验手册中报告重测信度时应说明两次施测的间隔，以及在此期间内被试的有关经历（4）时间间隔的把握：适宜时间间隔依照测验目的、性质及被试特点而定，可以是几分钟甚至几年。例如对于年幼儿童的间隔要小；年长群体的间隔可大。但智力测验的间隔不能太短，成就测验的间隔不能太长。 一般间隔时间不超过六个月，既不能让被试记住上一次测验的内容，又不能让其特质发生变化，或对所学知识产生遗忘。6、重测信度的评价：（1）优点：能够提供有关测验结果是否随时间而变异的资料，可作为预测受测者将来行为表现的依据。（2）缺点：易受练习和记忆的影响，前后两次施测间隔的长短必须要适度。（二）复本信度1、什么是复本：任何测验只是所有可能题目中的一份取样，所以可编制许多平行的等值测验，叫做复本。复本等值要符合下列条件：（1）各份测验测量的是同一种心理特性。（2）各份测验具有相同的内容和形式。（3）各份测验的题目不应重复。（4）各份测验题目数量相等，难度和区分度大体相同。（5）各份测验的分数分布（平均数和标准差）大致相等。（6）复本编好后，应再测一次，以确保各份测验的等值。2、复本信度定义：两个复本施测同一被试群体，求其相关。（1）等值性系数：同时连续施测，反映内容变异。形式：复本A同时复本B（2）稳定与等值性系数是对信度最严格的检验，反映的是“内容变异时间变异”的共同作用效果。形式为：复本A适当时间复本B 3、使用前提条件：构造出两份或两份以上真正平行的测验，被试要有条件接受两个测验。4、复本信度的评价（1）优点：可以在一定程度上避免重测法的缺点（2）缺点只能减少而不能排除练习和记忆的影响。第二个测验只改变了测验的具体内容，已经掌握的解题原则容易迁移到同类问题。对于许多测验来说，建立复本十分困难。（三）分半信度1、定义：在测验没有复本且只能实施一次的情况下，可将测验项目分成对等的两半，根据被试在这两半测验中所得的分数计算相关系数，即得分半信度。计算分半信度先要对测验分半。不同的分半法可能会得到不同的信度值。有时为了使两半基本等值，可将项目按由易到难的顺序排列编号，然后按奇数和偶数序号将项目分半。要注意使那些性质相同、联系紧密的项目分在相同的一半，否则会使信度值偏高。2、校正：分半信度只是半个测验的信度，须用斯皮尔曼-布朗公式校正： rxx=2rhh/(1+rhh) 且两半测验分数的变异数相等时才能使用。（四）同质性信度（内部一致性信度）1、定义：同质性指测验的所有题目测量的是同一种心理特质，表现为各个题目得分之间有较高的相关，相关越高则同质性越强。 同质性信度也叫内部一致性系数，是指测验内部所有题目间的一致性程度，一个测验所测内容或特质的相同程度。2、注意事项：同质测验分数的意义比较明确，但是，单独的同质性测验不能预测一个异质的行为或心理特性。现行的许多心理测验都是异质的，不过它们多半是由若干个相对同质的分测验或分量表所组成，每个分测验或分量表只测量一个方面的特征。这样，当把分数组合起来后便可以做出明确的解释。3、使用范围：学绩测验可不考虑同质性。同质性信度与结构效度密切相关。4、计算方式：一般采用数据统计软件，克隆巴赫系数最为常用。（五）评分者信度1、定义评分者信度是指不同评分者之间在测验结果计分上的一致性。在心理测验中,评分者信度的计算,通常是随机抽取若干份试卷,由至少两位受过训练的评分者按计分规则分别判分,然后计算它们的相关。几个评分者的评分越一致,评分者信度越高。2、计算方法：最简单的估计方法就是随机抽取若干份答卷，由两个独立的评分者打分，再求每份答卷两个评判分数的相关系数。这种相关系数的计算可以用积差相关方法，也可以采用斯皮尔曼等级相关方法。如果评分者在二人以上，而且又采用等级记分时，就需要用肯德尔和谐系数来求评分者信度。（六）对信度系数计算的评价1、在一般情况下，间隔施测的复本信度最低，因为很多因素有机会影响到分数。2、校正过的分半相关，因为影响的因素少，所得的信度估计为最高。3、稳定与等值性系数是对信度最严格的检验，反映的是“内容变异时间变异”的共同作用效果。（七）信度的影响因素和提高信度的方法1、影响因素：被试、主试者方面、施测情景方面、测量工具方面、两次施测得间隔时间；2、提高信度的方法（1）适当增加测验的长度：虽然增加题目可以提高信度，但并非多多益善。增加测验长度的效果遵循报酬递减率，测验过长是得不偿失的，有时还会引起被试的疲劳和反感而降低可靠性，还要注意一点的是，只有当新题目是与原题目选自同一总体，即新题目与原题目具有同质性时，增长测验才能改进信度。（2）使测验中所有试题的难度接近正态分布，并控制在中等水平。（3）努力提高测验试题的区分度（4）选取恰当的被试团体，提高测验在各同质性较强的亚团体上的信度。（5）减少无关因素的影响。二、效度所谓效度，指一个测验或量表实际能测出其所要测的心理特质的程度。（一）内部效度：在研究的自变量和因变量之间存在一定关系的密切程度。成熟、历史、被试选择偏差、被试缺失、前测、实验程序、统计回归以及多种条件的交互作用都可影响内部效度。（二）外部效度：是指研究结果能够一般化和普通化到样本来自的总体和其他变量条件、时间和背景中的程度，即研究结果所代表的普遍性和适用性。被试的代表性、操作定义的准确性、研究的反作用、前测对实验的影响、被试多重处理、实验者效应、研究和实际情境的差异大小、被试与实验的交互作用会影响外部效度。（三）内容效度1、定义：一个测验实际测得的内容与所要测得的内容之间的吻合程度。主要应用于成就测验、选拔和分类的职业测验，但不适用于能力倾向测验和人格测量。注意要与表面效度相区分，是指某个外行人对某个测验表面上看好像是测某种心理特质的一种现象，假如这个外行人能够有效的的测得某种心理特质时，该测验就可以说是有较高的表面效度。一般来讲，最高行为测验往往表面效度高，而其他的测验则希望表面效度低。2、确定方法：首先要明确预测内容的范围，其次确定每个题目所测的内容，并与测验编制者所列的双向细目表进行比对，最后制定评定量表，考察题目是否能够反映所要测定内容。此外，还可以测量复本信度，或者采用再测法（前测后测比较）。3、评价（1）优点：不但是评价学绩测验的最适合的方法，而且编制任何测验都要加以考虑的方面；（2）缺点：缺乏理想的数量指标，因而妨碍了信息交流和各测验间的相互比较。（四）结构效度1、定义：也叫构思效度、构念效度，旨在以心理学的理论概念来说明并分析测验分数的意义，即从心理学的理论观点，就测验的结果加以诠释和探讨，亦即根据心理学理论上的构想来编制测验的内容或选择试题。2、确定方法：可以通过测验内部寻找证据法、测验之间寻找证据法、考察实证效度法以及多种特质多种方法矩阵法。测量之间寻找证据法需要注意聚合效度和区别效度，所谓聚合效度，是指当测量同一构念的多重指标彼此间聚合或有关连时，就有此种效度存在；所谓区别效度（分歧效度），是与聚合效度相反，此类效度是指当一个构念的多重指标相聚合或呼应时，则这个构念的多重指标也应与其相对立之构念的测量指标有负向相关。3、多种特质多种方法矩阵法：如图表所示（1）主对角线数值：同样方法测相同特质所得相关，是信度指标；（2）虚线三角形之间的两条对角线的数值：不同方法测相同特质的相关，是效度指标；（3）实线三角形内的数值：同样方法测不同特质的数值；（4）虚线三角形内的数值：不同方法测不同特质的数值。（五）实证效度1、定义：也称效标关联效度，是指一个测验对处于特定情境中的个体的行为进行估计的有效程度，一个测验是否有效，应该以实践的效果来作为检验的标准。效标是衡量一个测验是否有效的外在标准，独立于测验并且可以从实践中直接获得我们感兴趣的行为。因此，作为效标来讲，应该具有多样性、复杂性、特殊性和时间性，一般常用的效标有学业成就、等级评定、临床诊断、实际工作表现、某个训练成绩等。2、实证效度的确定方法（1）相关法：求测验分数与效标测量间的相关，是最常用的方法；（2）区分法t检验：比较高低分组的差异；（3）命中率法：分为总命中率和正命中率法，如下表所示A、总命中率法：B、正命中率法：（六）统计结论效度：是检验研究结果的数据分析程序与方法的一种有效性指标。若数据的质量差、违反统计检验的假设、统计检验能力低，则统计结论效度就差。（七）提高效度的方法测验的构成、测验的实施过程、接受测验的被试、所选效标的性质、测量的信度都会影响效度。因此可以采用以下方法提高效度：1、精心编制测验量表，避免出现较大的系统误差2、妥善组织测验，控制随机误差3、创设标准的应试情境，让每个被试都能发挥正常水平4、选好正确的效标，定好恰当的效标测量，正确地使用有关公式三、信度和效度的关系1、信度高是效度高的必要而非充分条件2、测验的效度受它的信度制约，信度系数的平方根是效度系数的最高界限6