考试命题技术与实例反思.ppt

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,考试命题技术要求与实例,岳阳市教科院,于志辉,2015,年,12,月,引言,1.,先请大家做一道游戏题：,【5008】,诸多答案,9909,50051,51005,（许）,59091,（张）,91188,（周）,97108,511108,511081,把,5008,倒过来是,8005,，去掉,8,右边的,0,的上下,2,个火柴，变成,81105,，将,2,个火柴放在,81105,的右上角，即,81105,的,11,次方,11,的,81105,次方,91108!,2.,一则幽默习题解答,3.,一次考试成绩统计,某班一次数学考试成绩如下,:20 33 34 12 6 56 45 23 18 0,3 17 21 15 43 28 61 31 25 10,64 53 41 29 63 11 20 8 39 48,平均成绩：,28.9,及格率：,10%,第一部分 关于考试与试题命制的几点认识,一、,现代考试和素质教育是相辅相成的,素质教育思想古来有之。教育学理论中所追求的教育以及所有教育家所提倡的教育，在本质上都是指素质教育,.,应试教育方法也是古今中外有之。,第一，考试是人类优秀文化不断传承和积淀的结果，堪称是全人类共有的文化精品。,孙中山先生说过,：“作为一种手段来说，我国的考试，确实是最古的，也是最好的。”,他还说,：“现在各国的考试制度，差不多都是学英国的。穷流溯源，英国的考试制度，原来还是从我们中国学过去的。”,第二，考试也是素质评价的一种方法，而且是很重要的很实在的评价方法。,虽然考试无法全面检测人的各种素质，但是通过中西合璧的现代考试技术，确实能够比较客观地检测到学习者在认知素质、心智技能、逻辑思维、学习能力、知识与技能掌握等方面的发展水平。,考试结果虽然不能说明全部素质，但许多素质可以通过现代考试测量科学方法来判断。,第三，改革考试，可改变一切,英国著名的教学法、测试、教材方面的专家,Rod Bolitho,说过这么一段话：“,Change methodology,the teachers dont change easily.Change the textbooks,you change a lot,but you dont change much.Change the exams and textbooks,the methodology will follow.Change the exams,you change everything.”,二、考试是推进素质教育的切入点,之一,全面推进素质教育，要有先进的教育思想方法，按照教育规律办事。,考试是我国推进素质教育改革的最佳切入点之一。,第一，考试以及学科成就测验是一种最常用最实在的评价方法。,推进素质教育应该更加重视考试改革与试题命题。,第二，考试具有强烈的导向作用。,学校教育在相当长一段时间仍将关注升学考试问题。因此，我们要重视考试，发挥考试积极的导向作用，使考试有利于全面推进素质教育。,第三，考试能保证达到素质教育的最起码的教育目标。,考试优越性在于能够有效地关注认知领域的教学内容和要求，特别适合于学科中心课程和教材类型，有利于强化学科基础知识、基本理论的教学。,三、,试题的命制,命题是日常教学的一个重要环节。,一份好试题是学生与老师的一次无声的交流。,一份好试题能为教学作出指引。,1.,试题命制要牢牢把握基础教育特性,基础教育的性质和教育对象决定基础教育的第一特性是“基础性”。,教育工作者对中小学生可以有很多美好的设想和期待，但青少年身心发展规律将内在地制约教育工作者非分的要求。,设计过高的标准尤其是任何拔苗助长式的举措，最终是累了教师苦了学生害了国家。,2.,试题命制要体现教育测量评价的科学性,大家都“身经百试”，似乎到了“不会作诗也会吟”的程度。其实，考试命题是一项比较专业的业务活动，考试命题有其丰富的科学理论做基础。,中小学教师学点教育测量学和教育评价学方面的理论知识，有利于提高考试评价的科学性，有利于提高教育质量，有利于提高教师的专业化水平。,3.,试题命制要与社会实际和学生学习生活经验有合理的对接性,要加强试题与社会实际和学生生活的联系，注重考察学生对知识的理解和应用，特别是在具体情境中综合运用能力，即具体情境下分析问题和解决问题的能力。这是当前试题命题努力的方向之一，也是难点之一。,4.,试题命制要注重回归教材、适控难度、具有,“,减负,”,的责任性,教育是有计划、有目标、有标准的。教材编写、教学改革、考试设计等，一定要按照教育规律，要有利于“减负”的学生的学习负担。因此，试题命题要注重回归教材、控制适当难度与甑别性。,例：,探究题,29,如图,1,所示，把导线放在磁场里，通电导体由于受到磁场力的作用而运动起来。在实验中，接通电源导体开始运动起来了。发现：导体与铁轨,a,、,b,连接的地方不断有火花产生。,（,1,）请你猜想接头处火花产生的原因可能是什么？2,）用你学过的知识支持你的猜想。,预试样本数据：,题目 样本数 分值 均分 难度 低分组 均分 高分组 均分 区分度,29_1 257 3.00 0.49 0.16 0.31 0.74 0.14,29_2 251 3.00 1.31 0.44 0.87 1.57 0.23,第一问提出猜想的难度,0,16,，区分度,0,14,。说明绝大多数学生不能够提出合理的猜想。也无法区分出不同类型的学生。,本题失去了甄别和选拔功能。,试题的来源：,试题的素材选取人民教育出版社,物理,八年级教材中的演示实验原图。教材中原图探究的是“通电导体在磁场中受到作用力”，实验现象是通电导体在磁场中受力而运动起来试题的探究点：,演示实验中，金属导体与轨道,a,、,b,之间产生火花。火花从哪里来？,试题的考查目标：,通过实验中出现的意外现象。利用对比的方法，考查比较、判断和分析问题的能力。同时考查应用知识解释问题的能力。,试题答案出现的典型问题：,最典型的答案是摩擦生热，一部分学生回答因为通电导体受到作用力而运动，于是导体滚动与轨道相互摩擦生热而产生火花。另外大多数学生无法作答。,试题的改进方案建议：,改变试题文字描述结构。学生存在的主要困难是不能够把注意力集中到有火花处和没有火花处。没有进行比较分析。可以把试题修改成主动比较描述，引起学生注意。例如把题干修改成：发现：导体与铁轨,a,、,b,连接的地方不断有火花产生，而轨道和导体不相连接处没有火花。修改以后的题干明确引导学生要进行比较分析。只需要寻找出两者的不同点就可以进行合理猜想。从考查能力方面提高指向性，降低难度。,平时加强比较分析能力培养。比较：通电导体、轨道,a,、,b,和它们之间的接触点。发现：它们串联电流,I,相同。分析：在所学习过的知识中能够迅速回忆并且抽出相对应的焦耳定律（,Q,=,I,2,Rt,）与电流产生热量、温度升高、引起火花有关。寻找出导体与接触点之间的不同点可能是电阻,R,不同。猜想顺利实现。这样的猜想有依据、有方向。,参考答案：,导体与轨道,A,b,连接的地方电阻大 （,2,分）,根据焦耳定律,Q,=,I,2Rt,，在电流相同时，接头处电阻大于轨道电阻，产生热量比轨道多，接触处温度高有火花产生。（,4,分）,5.,试题命制要有利于维护教学秩序稳定性、降低教师和学生的焦虑性,试题需要改革创新，但务必有利于稳定教学秩序，避免考前各个学校教师猜测捉迷藏以及搞题海战术。,第二部分,试题命制基本要求,一、命题原则,二、试题命制基本程序,三、试卷双向细目表,一、命题原则,科学性,。要保证试卷内容的科学性，避免出现知识型、观点性、技术性等错误；试卷语言表述规范、准确、简洁、逻辑严谨。答案与评分标准科学合理，便于操作。,基础性,。严格按照课程标准、学生和教学实际，考查课程标准所要求的学科基础知识和基本技能。,全面性,。试题要体现课程标准的要求，在全面考查学生基础知识、基本技能的同时，还要考查学生学科学习方法的掌握和对历史事件的认识、态度等。,指导性,。正确发挥考试的导向作用，不出偏题、怪题、死记硬背的题；试题侧重学生对历史知识的理解，注重试题的综合性、开放性和教育性。命题要有利于引导教师改进教学，引导学生学会学习。,适切性,。试题要符合教学及学生的实际，试题的难度比例适当，要有利于不同学习程度的学生都能考出自己的水平；题目设置要有梯度，起点适当，坡度适宜。,一、,中考试题命制基本程序,1.,明确考试性质、目标,2.,编制试题双向细目表,3.,独立命题、试题初选,4.,审改初选试题，完成正卷组卷,5.复审全卷，修改完善,6.,分头做答，确定答案及评分标准,7.,试卷文字及图片录入，反复校稿（含答题卡录校）,8.,整卷终审，反思自评,二、考试命题双向细目表,考试命题双向细目表是一种考查目标（能力）和考查内容之间的,列联表,。制作考试命题双向细目表，是命题工作的一个,重要环节,。双向细目表可以使命题工作避免盲目性而具有计划性；使命题者明确测验的目标，把握试题的比例与份量，提高命题的效率和质量。同时，它对于审查试题的效度也有重要的指导意义。,双向细目表是包括两个维度,(,双向,),的表格，细目表也可以是多维的，一般用双向细目表。较常见的有四种：,（,1,）反映测验内容与测验目标关系的双向细目表测验,内容,测验目标,合计,识记,理解,应用,分析与综合,创造,合计,测验,内容,选择题,简答题,证明题,应用题,分析题,合计,识记,理解,识记,分析,综合,应用,分析,综合、创造,合计,（,2,）反映测验内容与测验目标、题型之间关系的双向细目表,该表是上一个表的改进，增加了题型。,题型,题量,分数,分布,难易度,覆盖面,合计,客,观题,主,观题,每小,题,分数,每大,题,总分,易,中,难,第,一,章,第,二,章,第,三,章,选,择题,填,空题,简,答题,计,算题,合计,100,分,（,3,）反映题型与难度、测验内容之间关系的双向细目表,题型,填空题,选择题,判断题,简答题,叙述题,合计,题数,15,20,5,4,2,46,分数,难,易,程,度,A,8,B,7,C,D,认,知,度,I,8AI,7BI,5AI,II,1AII,7BII,4CIII,IV,2DIV,合计,（,4,）反映题型与难度、测验目标之间关系的双向细目表,识记,理解,合计,一、,1,（,2,分）,二、,4,（,2,分）,合计,反映测验内容与测验目标,(,学习水平,),和题型分数的双向细目表：把要考查的知识内容与学习水平,(,能力,),、试题的类型和分数呈现在一张表上。命题时，一目了然，便于操作。,制作双向细目表的程序如下：,（,1,）列出大纲的细目表,（,2,）列出各部分内容的权重,（,3,）列出各种认知能力,(学习水平,),目标,的权重,（,4,）确定各考查点的,“,三个参数,”,（,5,）审查各考查点的分配是否合理,某校八年级期中历史考试双向细目表（部分）,某校九年级思想品德期末考试双向细目表,某校九年级思想品德期末考试双向细目表（详表部分）,某省英语中考命题计划,一、选择题,1.,试题的主干语本身有意义且能提出一个明确的问题。试题的主干语中不要滥用否定结构和双重否定结构。,要尽可能将各选项共同的词句放到题干中。这样可以使题目简洁明了，减少学生阅读选项的时间。,第三部分,命题的技术要求,如：（某省会考题）如果人体内胆汁分泌不足，将会（）,.,影响对豆腐的消化,.,影响对米饭的消化,.,影响对肥肉的消化,.,影响对瘦肉的消化,点评：,此题各选项中都有共同的句式“影响对,的消化”，所以选项的设计不够简练。,该试题可以修改为：如果人体内胆汁分泌不足，将主要影响哪种食物的消化（）,.,豆腐,.,米饭 ,.,肥肉,.,瘦肉,2.,所有选项在逻辑上应与试题的主干语一致，而且错误选项在表面上应貌似合理。,如：（某教辅书试题）对于在,35%,的蔗糖溶液中已发生质壁分离的细胞，严格地说其细胞之间充满了（）,.35%,的蔗糖溶液 ,.,浓度高于,35%,的蔗糖溶液,.,溶液的浓度高于细胞液 ,.,溶液的浓度低于细胞液点评：,该题目的选项和在语法结构上与题干不一致。,故可以将这两个选项分别修改为：,.,高于细胞液浓度的溶液 ,.,低于细胞液浓度的溶液,又如：（全国高考题）播种前浸种时间太长，就会引起烂种和烂芽，其主要原因是（）,.,二氧化碳中毒,.,酒精中毒 ,.,乳酸中毒,.,能量不足点评：,修改前，试题的选项与前三个选项的性质明显不同，实测的结果发现选项的诱答效用性接近于零。,如果将选项改为同性质的“丙酮酸中毒”，试题测试效果明显好转。,所有选项在长度上大体相等，避免把正确选项写得特别长或特别短为作答提供线索。,用于测量评价高层次能力的试题应有新意，避免使用包含难以理解且与考试目标无关的内容的试题。,在选项中一般要避免使用“以上都对”或“以上都错”的选项。正确选项应具备唯一性和排他性。,正确选项的位置应随机安排。试题之间不要互相提示答案。,题干意义要完整。,选择项叙述的详略长短，不应成为考生选择答案的暗示因素。,如：下列事件中必然事件是（）,A,一次掷,10,枚均匀的硬币，一定有正面朝上的,B,下雨天每个人都打雨伞,C,若某种彩票的中奖概率是,1%,，则买,100,张这样的彩票一定有一张能中奖,D,某小组有,13,名同学，至少有,2,名同学的生日在同一个月,选择题中备选项的编制是命题的关键环节，尤其是干扰项的编制应该与答案具有似真性。,编制具有迷惑性的干扰项的方法,使用学生平时练习中最常见的错误；,使用与题干有关，且听起来重要的词，且合适；,使用课本上的语言，或者其他具有真理性的语言；,使用那些由于学生误解或粗心而造成的错误答案；,干扰项在内容上与正确答同质或相似；,干扰项与正确答案在长度、词汇结构、句子结构和内容复杂程度上相似，且在语法上与题干一致。,避免题干与正确答案间存在语言联系,正确答案出现在选项中的位置应该大致平均而且是随机的。,注重基础知识与技能，强调理解和应用,(2011,年,，,广东,省，第,12,题,),下列数轴表示正确的是：,该题结合数学上的数轴考,查,了着火点、化合价、生铁和钢中含碳量以及,pH,等知识，该题考查的知识点多，且出题新颖。,题干的陈述要简单、明确，避免使用不必要的修饰词及过分复杂的句子结构。,如：我国古代数学发展一直处于世界领先水平，特别是宋、元时期的“算法”，其中可以同欧几里德辗转相除法相媲美的是,(B),A,割圆术,B,更相减损术,C,秦九韶算法,D,孙子乘余定理,二、填空题,填空题属于再生式的客观测验。,试题要着眼于考查重要的、关键的知识，不考无关紧要和稀奇古怪的内容。,填空题答案应当简洁、明确，抓住句子内容的关键点。,有比较公认的答案，否则就改用其他更加合适的题型。,空格的线段长度应与答案内容大体相当，太长或太短往往会引起误会。,尽量把填空题的空格留在句子的后面或中间，不要一开头就是空格。,除非默写回忆形式的填空，一般填空题答案空格以一个或两个为原则，空格不能太多，以避免句子支离破碎，影响学生理解题意。,二、填空题,填空题属于再生式的客观测验。,（某市会考题）昆虫的脑激素由,_,分泌，它作用于,_,，使,_,释放,_,，以控制昆虫的,_,。,点评：此题由于要求填的空格太多，题干被弄得支离破碎，非常不利于学生阅读和弄清题意，所以是一道极不合格的试题。,口袋中放有黄、白、红三种颜色的小球各,1,个，这,3,个球除颜色外没有任何区别，随机从口袋中任取,1,个球，写出这个实验中一个可能发生的事件,。,（例如“取出,1,个黄色的小球”）,如：爱美是,人类,的天性。人类自从在劳动中诞生美之后，就,寻找,着美，,追求,着美，,创造,着美,既孜孜不倦地用美的规律塑造,客观世界,，也孜孜不倦地用美的规律塑造着,自身,马克思说：“,社会,的进步，是人类追求美的结晶。”美术教育对人的综合素质的提高具有,重要,作用，它是素质教育的,重要,组成部分。美育的目的是培养健全高尚的,人格,，塑造完美理想的,人性,，创造美好的,人生,，事实上每一种教育的最终目的都是如此，只是美育是最直接的途径和最有效的,办法,。,每道题的空白处应是填有考查意义的关键词语，或是问题的重要内容或字眼，而不是旁枝末节。,一般每道题只有,1,个空，对于有,2,个以上空白的题，各个待填答案要相互独立不能有关联。,如：命题包括,和,；题设与结论都成立的命题叫做,；题设成立，但结论,的命题叫做假命题；证明一个假命题最简单的方法是,。,对于空白处的答案必须确定和唯一,另外，以空格为基本计分单元，一般要求每个空格赋分相同。,三、简答题,简答题是提出问题、要求学生用简洁的语言作答的试题。它可以从不同角度考查学生对科学概念和规律的理解和运用，比较深入地检测学生的学习水平。但简答题评分不容易做到客观。此外，那些完全照搬课本问题的简答题也容易导致学生不求理解而死记硬背。设计简答题时应注意：,1,答案的叙述要确定且简单,2,问题要涉及重要内容,3,测验题的陈述要避免提供答案线索,4,评分标准应该按点给出分数,【,例,】,“,人间四月芳菲尽，山寺桃花始盛开。”说的是在春季的四月，山下的桃花已经凋谢，而山上寺庙中的桃花才刚刚盛开。请分析这种现象形成的主要原因。,答案：春天气温是逐渐上升的，但气温有随高度增加而降低的规律，因此，同一时间山下的气温比山上的要高，而桃花的开放与温度有关，所以形成了山下的桃花已经凋谢，而山上寺庙中的桃花才刚刚盛开的现象。,评析,这道简答题将生活、科学的人文结合起来，考查气温随高度的变化及气温对植物开花的影响。,四、是非题,是非题是由一个完全的陈述句构成。设计是非题时应注意：,1,是非题每题只能包括一个概念,2,概念的陈述或对或错均需无争议,3,语句结构简单，用词避免晦涩生僻,4,要正面叙述，一般不用否定句,5,是非题要有足够的量，不宜过少,6,“是”题与“非”题的数量比例适当，并随机排列,7,避免带有强调意味的字词，如“一定”、“常常”、“永不”等,五、材料解析题,材料解析题主要用来考查学生通过材料再现、再认史实的能力；阅读并处理信息的能力；综合归纳、概括提炼历史知识的能力，分析问题得出结论的能力，对学生能力要求比较高。,编制材料解析题应该注意：,1.,所选材料不论出自教材，还是出自课外，都应是与课程内容、课程目标相关的内容；,2.,材料应贴近学生的课程经验和阅读水平，阅读量要适当。,3.,在问题立意上，除知识立意外，还应注重能力立意，着重考察学生通过阅读，归纳总结、提炼概括信息等能力。,例,4,：阅读下列材料，并回答相关问题。,材料一,：,凡未经国会同意，以国王权威停止法律或停止法律实施之觊觎权利，为非法权利。除经国会同意外，平时在本王国内征募或维持常备军，皆属违法。,材料二,：我们以这些殖民地的善良人民的名义和权利，谨庄严地宣布并昭告：这些联合殖民从此成为、而且名正言顺地应当成为自由独立的合众国；它们解除对于英王的一切隶属关系，而它们与大不列颠王国之间的一切政治联系亦应从此完全废止。,材料三,：,第一条：在权利方面，人们生来就是而且始终是自由平等的。,第二条：任何政治结合的目的都在于保存人的自然的和不可动摇的权利。这些权,利就是自由、财产、安全和反抗压迫。,第十七条：财产是神圣不可侵犯的权利。,请回答：,上述材料分别出自哪三部法律文献？由哪三个国家颁布？,结合材料分别概括其核心内容。,此题主要考查学生对课程标准中规定的英法美三大资产阶级革命中颁布的重要文献内容及其历史意义的掌握情况。,提供的三段材料全部是学生熟悉的教材中的材料，阅读量和难易度比较适中。,在问题设计上，第（,1,）问侧重考查学生对基础知识的记忆能力，难度较低；问题（,2,）则侧重考查学生对材料进行提炼概括的能力，难度较高，该题设计上的梯度和层次性，使试题有一定的区分度。,六、开放式试题,（含计算、探究、论述、作文题）,所谓开放型试题，是指那些条件不固定，结论不明确，解法无限制，却能反映学生对知识的总结、整合、应用能力的试题,.,开放型试题常见有：条件开放型题、结论开放型题、组合开放型题,(,即条件和结论同时开放,),、策略开放型题,.,试题应该用来测量较高层次的教学目标，如要求学生提出理由、解释变量间的关系、描述与评价材料、有系统地陈述结论等。,在命题时，我们必须对学生提出明确的任务，使每道题都能真实地反映学生实际能力，而不受阅读、理解等其他因素的干扰。,必要时可以出多道论述题让学生自由选择其中的某些问题或所有问题进行作答。考试评价要体现人性化、公平性和个性化的理念。,开放性试题具有设问开放性、答案设置多元化、解题策略多途径的特点，考查学生的思维层面更为广泛。回答这样的问题，要求考生充分运用发散性思维，从多角度、多层次、全方位分析和回答问题，同时，考生还必须将归纳和演绎、分析和综合、抽象和具体等多种方法并用才能圆满回答这类问题。开放性试题设问的开放性绝不是漫无目的地乱问一通，答案的多元化也不是考生随心所欲想怎样答就怎样答，任何违背题目主旨、不符合题目要求的作答都不能作为题目答案。,在参考答案及评分标准中要提供可能出现的足够多的正确答案和相应的评分要求。,七、对于试题材料选择的,几点要求,1.,试题材料的选择，要注重思想内涵、文化品味，要注意体现情感态度价值观的导向。,2.,要注意避免试题情境设置生硬，或脱离客观实际。,3.,要注意考基础知识不等于考机械记忆。,4.,注意考知识不等于考生活常识。,5.,客观题的答案要明确、具体，不能存在争议。,6.,注意从实际中选取素材，考查学生在实际情境中提取信息分析和处理问题的能力。,7.,要注意对科学探究能力的考查，引导教学注重探究过程和方法，注重培养学生科学地认识事物、分析现象和把握规律的能力。,八、命题的建议,:,1.,试题立意，体现教育价值；,2.,试题创新，以考查学生创新意识为本；,3.,联系实际，增强应用，体现时代性；,4.,试题设计，体现以考生为本；,5.,要有一定的覆盖面。,四、试题编制的技术规范和技巧,1.,难度的控制,难度系数,=,该试题的平均分,该试题的满分值,我们平时的测试题难度系数把握在,0.65-0.75,左右比较合适。,四、试题编制的技术规范和技巧,2.,区分度的把握,区分度,=,（高分组的平均分,-,低分组的平均分）,满分值,区分度的指标为：,0.4,以上为优良题，,0.3-0.39,为良好题，,0.2-0.29,为一般题，,0.2,以下为劣题，需要修改。,四、试题编制的技术规范,3.,信度的达成,为了试卷具有较高的信度，首先就是所选习题应具有科学性、实效性、明确性，不能出现有科学性错误的、不符合学生实际的、设问不明确的题目，使学生无从答起。,信度的理论公式,从以上公式可以看出，随机误差的方差越小，测量的信度就越高,.,信度的取值范围为,0,，,1,，如果测量误差的方差为,0,，那么，测量的信度等于,1,，如果测量误差的方差等于观察分数的方差，则测量的信度为,0.,四、试题编制的技术规范和技巧,4.效度的提升,效度是指测试结果与测试目标的符合程度,即测验达到测验目的的程度。,第四部分 考试的教育测量学质量特性分析,教育考试的质量特性。从宏观上讲有信度、效度及可用度，从微观上讲，有题目的难度、题目的区分度，以及题目的教学敏感度等。,测验的信度（,reliability,），,指测量结果或评价结果之间的一致性程度。,也就是测量结果是否真实、客观地反映了考生的实际水平。,无论是量的规定性，还是质的分析判断，高信度的测验或评价表意味着具有较好的误差控制能力。因此，,信度是反映测量或评价表性能的一个重要的质量指标。,信度高低可以用信度系数,r,来表示，,其,值在,0,到,1,之间。,测验的信度,具体而言，可以从以下三方面来理解测量的信度。,信度指实测值与真值相差的程度,测量的目的之一，就是希望通过测量得到的实测值能够接近事物的真实值。由于各种原因，实测值一般不会完全等于真实值，两者之差称为测量误差。测量误差越小，测量的信度就越高。,用一个等式表示如下：,信度指统计量与参数之间的接近程度,统计量和参数是统计学中的两个基本概念。统计量是指样本上的各种数字特征（如样本的平均数、标准差等），参数是总体上的各种数字特征（如总体的平均数、标准差等）。,统计量越接近参数，这个统计量的可靠性就越高，因此，信度就越高。,要知道统计量对参数的接近程度，可以对参数进行区间估计。这种方法对估计真分数也很有用的。但这种理解也无法计算出信度。,信度指两次重复测量或等值测量之间的关联程度,如果对同一对象进行两次重复测量或者等值测量以后，计算两次测量的相关系数，,相关系数越高，说明测量的信度就越高；反之，就越低。,对于信度的这种理解，有利于信度的计算。但重复测量会受到被测对象的经验、知识增长等因素的影响，等值测量又较难编制，因此，采用这种方法计算信度时，也是有误差的。,信度是任何一个测量的必要条件，对于教育测量来说，它具有更为重要的意义。,因为教育测量的对象主要是精神现象，所测量的特性不易把握，为了能真实地反映测量对象的某种特点，需要更加注意测量的信度，从而正确地判断测量结果的价值。只有信度高的测量才能成为教育工作者有用的工具，否则，测量的结果是无意义的、无效的。,信度的理论公式,从以上公式可以看出，随机误差的方差越小，测量的信度就越高,.,信度的取值范围为,0,，,1,，如果测量误差的方差为,0,，那么，测量的信度等于,1,，如果测量误差的方差等于观察分数的方差，则测量的信度为,0.,信度的类型,（一）稳定性系数,(1),稳定性系数又称重测信度。它是指用同一测验试卷，在先后两个不同时间内对同一组被测试卷，两次测验实得分数的相关系数。稳定性系数是估量信度最简单的方法，只需用同一份试卷对同一被测试卷测验两次即可。,(2),估计稳定系数的基本程序是：,（二）等值性系数,(1),当同一测验的一种型式不能或不适合实施两次时，就需要采用该测验的另一平行型测验或者复份。,(2),决定等值系数的方法是。先实施第一次测验，然后在最短的时间内实施第二份等值的测验，再求它们得分的相关系数。这个相关系数即为信度的等值性系数。,(3),其基本程序为：,（三）内部一致性系数,(1),分半信度,这种方法是将一次测验分成两个假定相等而独立的两部分来记分，通常是以题目的奇数为一组，偶数为一组，计算两组的相关系数，最后用斯皮尔曼,布朗公式校正，求得整个测验的信度系数。,(2),库德尔,理查德森公式法,用这种方法只需测验一次，然后以各个问题的正确反应数为基础，或根据各人总分的平均数和标准差，计算信度系数，常用的库德尔,理查德森公式有 和,（四）论文式测验的信度系数,论文式测验的评分，没有严格的评分标准，以致同样的一个题目，不同的应试者的回答和得分都不一样，所以无法用前面的公式，而要用克龙巴赫所创的,系数公式：,考试的效度,效度是指测量结果的准确性和有效性的程度，亦即测量是否达到了预期的目的。,考试的效度是指通过一次考试能确实地测量到它所欲测量的东西的程度。,因此，考试的效度既与考试本身属性有关，也与考试的用途与使用方法有关。离开考试用途，孤立地研究考试的效度是没有太大意义的。效度的概念在不断发展，效度的种类也因用途或研究方法的不同而不同。,考试的效度可用考试的内容效度和效标关联效度来表示。我们可以从以下几个方面来理解效度：,（,一）测量的效度始终是对一定的测量目的而言的。,一般而言，任何测量都有某种特定的目的和功能，判断效度的高低，就是判断测验达到目的的程度。,（二）测量的效度也是对测量的结果而言。,一种测量工具只有经过实际测量，才能根据出来的结果判断它的效度。,（三）一种测量的效度只是高或低的问题。,因为，一种测量在编制时，总是针对一定的目的而编写的。,（四）在教育测量中，效度问题比在其他领域的测量更为重要。,每当进行教育、心理之类的间接测量的时候，必须考虑是否测量到了所要测量的东西，在多大程度上测量到了这些东西。也就是说，必须考虑测量的效度问题。,效度的理论公式,信度与效度的关系：,信度是效度的必要条件，但不是充分条件。一个测量工具要有效度必须有信度，没有信度就没有效度；但是有了信度不一定有效度。,信度低，效度不可能高。因为如果测量的数据不准确，也并不能有效地说明所研究的对象。,信度高，效度未必高。例如，如果我们准确地测量出某人的经济收入，也未必能够说明他的消费水平。,效度低，信度很可能高。,例如，即是一项研究未能说明社会流动的原因，但它很有可能很精确很可靠地调查各个时期各种类型的人的流动数量。,效度高，信度也必然高。,因此，在信度与效度之间，首先要重点保证是高效度，因为，高效度必然高信度；反之，则不然。特别是对于教育测量而言，效度问题显得更为重要。,信度与效度的关系：,效度的估计,（一）内容效度,内容效度是指测验目的代表所欲测量的内容和引起预期反应所达到的程度。也就是测量内容的代表性程度。在编制测验时，内容效度是一个相当复杂和不易解决的问题。,估计内容效度的方法,:,逻辑分析的方法,用测验题目与教材内容比较的方法,（二）效标关联效度,考察测验有效性的常用方法是选择一个外在标准，看测验结果是否与此标准相符。衡量测验有效性的外在标准简称效标，因为这种方法实际上是考察测验分数同效标的关系，所以称效标关联效度。效标关联效度有两种类型：同时效度与预测效度。前者指的是效标分数在测验同时即可取得。预测效度指的是效标分数要经过一段较长的时间后才能获得的效度类型。,（,1,）效标是用来衡量测验效度的尺度,.,（,2,）选择效标是一件困难而重要的工作,.,（,3,）效标关联效度又可称为经验效度或统计效度，是以测验分数和效标之间的相关系数来表示测验的效度的高低的,.,（,4,）效标关联效度又可分为同时效度和预测效度,.,（三）结构效度,（,1,）所谓结构效度，是指一个测量能实际测量出理论上的构念或心理特性的程度。,它的目的在于用心理学的概念来说明分析测验分数的意义，也就是说从心理学的理论观点就测验的结果加以解释和探讨。,（,2,）结构效度的确定方法：,从某一结构理论出发，导出各项关于心理功能或行为的基本假设；,据此编制测验；,（,3,）确立一个测量的结构效度需要两个步骤,必须指出，这个测量和所有理论上认为应与之有关的其他测量，有显著的相关。,必须指出这个测量与所有理论上认为不应与之有关的其他测量，没有显著的相关。,由果溯因，以相关、实验和因素等方法，检验测验结果是否符合心理学上的理论见解。,各种效度系数的要求,（,1,）不同的测验对效度系数有不同的要求，例如，智力测验分数与教师对学生的等级评定之间的效度系数一般在,0.300.50,的范围内；相同科目的标准测验成绩与教师对学生名次排列之间的相关系数一般应达到,0.600.70,；两种不同的智力测验或标准测验之间的相关系数应达到,0.600.80,，才符合要求。,各种效度系数的要求,（,2,）对效度系数大小的要求也受原测验与获得效标的测验之间的相似性的制约。若二者不相似，则效度系数偏低；若相似，则效度系数会高些。所以，有的测验效度系数达到,0.35,即已符合要求，有的却要达到,0.650.77,才能被认为是有效的测验。,题目的难度,难度是指测验试题的难易程度，可用通过比率来表示。,各个试题的难度以适中为宜。,试题太难或太易都不会有好的区分度，其信度也会降低。,国外许多研究者以及我国的试验结果证明，只有难度中等的试题才是较好的。,在教育测量中，客观题的难度一般用正确回答试题的人数与参加测验的总人数的比值来表示。其公式为：,题目的难度,这里，难度实际上表示的是容易度，与试题的实际困难程度正好相反。,难度是试题对学生知识和能力水平的适合程度的指标。,试题的难度不但对题目的区分度有影响，而且对试卷的信度和效度也有较大的影响。,难度是由参与测量的被试群体的整体水平决定的。,题目的难度,难度的计算,(,一,),计算难度的基本公式,1,客观题难度的计算：,难度的计算,2,主观题难度的计算：,(,二,),用极端分组法计算试题的难度,1,用极端分组法计算客观题的难度,具体步骤如下：,(1),先按测验总分的高低，按由高到低的顺序，依次排列试卷。,(2),从得分最高的一份试卷开始依次向下选出全部试卷的,27,，作为高分组。,(3),从得分最低的一份试卷开始依次向上选出全部试卷的,27,，作为低分组。,1,用极端分组法计算客观题的难度,(4),按下列公式计算难度：,2,用极端分组法计算主观题的难度,具体步骤如下：,(1),按测验得分排列试卷，确定高分组与低分组，各占总人数的,25,(,方法与前面相同,),。,(2),分别为高分组、低分组编制每道试题的分析表。,2,用极端分组法计算主观题的难度,(3),按下列公式计算难度：,难度对测验的影响,1,测验难度影响测验分数的分布形态,难度值过大或过小，都会造成测验分数的偏态分布。,难度值越接近,0,，测验的难度就越大，正确回答试题的人数就越少，测验分数就越是集中在低分段，其分数分布呈正偏态；相反，难度值越接近,1,，其难度就越小，正确回答试题的人数就越多，测验分数集中在高分段，分数分布呈现负偏态。,难度对测验的影响,2,测验难度影响测验分数的离散程度,测验难度直接影响测验分数的离散程度，因为难度过大或过小，测验分数的分布都呈偏态分布，亦即测验分数都分布在高分段或低分段，这样，测验分数的离散程度就变小了。,3,测验难度影响测验的鉴别能力,这里实际上谈的是难度对区分度的影响。,适中的难度可使试题的区分度达到最大。,测验的适宜难度,在常模参照性测验中要求试题难度适中，即大多数题目的难度在,0,3,0,7,之间，少数题目可在这一范围之两边且题数,(,或题分,),大体相当，使整个试卷的平均难度为,0,5,左右,(0,45,0,55,之间,),。只有适中的题目难度，才能使试题产生区分不同程度考生的最大效果，也才能使考生得分呈正态分布。而对全部考生都能做或都不会做的题目则应予删去。,控制题目难度的基本方法,一般说来影响题目难度的主要因素有：,考查知识点的多少；,考查能力的复杂程度或层次的高低；,考生对题目的熟悉程度,(,如本来较易的题目会因考生均未注意而造成很难，或本来较难的题目会因为考生普遍练习过而变得较容易,),；,命题的技巧性,(,如同一个问题，可以命得容易，也可以命得较难,),。,控制题目难度的基本方法,在大规模的测试中，就要通过预测来掌握难度了。首先由命题人员根据上述因素估计一个难度范围；然后通过测试看这个估计的准确程度，分析原因，进而提高评估能力。经过预测取得难度的题目可以进入题库，以备后用。,题目的区分度,区分度是指测验对考生实际水平的区分程度，用符号,表示。具有良好区分度的测验，实际水平高的应该得高分，实际水平低的应该得低分。所以，区分度又叫鉴别力。它是评价试题质量，筛选试题的主要指标与依据。,题目的区分度,区分度与信度的关系,此表是,1962,年,R,L,艾伯发表的，这里是假定全部试题的难度均为,0,50,时所预测的信度系数。里面的区分度指的是平均值。可见，要想达到理想的测验信度，提高区分度是一个好方法。,区分度与难度的关系,难度（,P,）,1.00 0.90 0.70 0.50 0.30 0.10 0.00,区分度的最大值,0.00 0.20 0.60 1.00 0.60 0.20 0.00,由上表可知，难度适中，可使区分度达到最大值。,区分度的计算,(,一,),用极端分组法计算区分度,2,主观题区分度的计算,(,二,),用内部一致性系数计算区分度,用极端分组法分析测验项目的区分度虽然计算简便、易于理解，但所得结果不精确，通常只在教师编制的课堂测验中使用。在标准化的或大规模的测验中，多采用相关法分析试题的区分度。,计算区分度时，要根据不同的测验目的选用适宜的方法。只有这样，才能正确地判定测验的区分度。,提高区分度的方法,1,使题目的难度适中，使整个考试难度适中,难度与区分度的关系在上表中已有说明，题目,的