教育测量评价的基本问题.ppt

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,教育测量评价的基本问题,与,高考命题改革,高凌飚,华南师范大学基础教育课程研究中心,gaolb,2007.8.6,高考命题的理论与技术专题讲座一,教育测量评价的基本问题,高考命题的基本要求,新课程背景下高考改革方向,高考与教学,教育测量评价的基本问题,测量与教育测量,测量：利用工具从量的方面确定物体的某种特性。,物理测量：,物理工具,直接测量,心理测量：,测验工具,间接测量利用刺激去激发有机体的反应，再测量反应的量的特征,教育测量：,学生在教育影响下的心理活动,提供资料和数据作为教育评价的判断基础,效度与信度,效度：测验能够有效测出所要检测的东西的程度,内容效度：试题与教学的目的和内容相符的程度,结构效度：测验的结构与目标要求相符的程度,标准相关效度：测验与作为标准的测验相符的程度,信度：测验获得的信息的可靠和准确程度,内部一致性：测试题目所检测的对象的一致程度,重测信度：一份测试前后两次测验的相关程度,复份信度：两次内容和目标相同的测试的相关程度,对半信度：等质量的两部分测试的相关程度,效度与信度的关系：,效度低、信度不一定低,信度低、效度一定低,区分度与难度,区分度：测验或试题鉴别被试者的水平差异的本领或精确程度,难度：测验或试题相对被试者的难易程度,区分度与难度的关系,过高或过低的难度都会导致区分度的下降,高考对区分度和难度的要求,从选拔的角度来说，高考试题应该有高的区分度,从有利于中学教学的角度来看，高考试题应该与考生所能达到的水平相适应,从试卷编制的工艺来看，高考试题的区分度和难度应该在一定范围内均衡分布,分数与测验结果的解释,分数：用以表示测量结果的量,分数单位的模糊性,分数单位的等值要求,等级制和百分制,等级制更适应测验对象的模糊性，反映测验者水平的质的差异，适用于水平参照的测验,百分制有较为细致的分数单位和基本连续的分数分布，适用于常模参照的测验,测验结果的解释：,以考生群体为标准：常模参照,以相对稳定的目标要求为标准：目标参照,从选拔的角度来看，高考是常模参照的测验但是，高考不能脱离中学教学的基本要求，在一定程度上要以课程目标为参照。因此，不能说高考是纯的常模参照测验。,评价的本质,顾明远主编,教育大辞典,增订合编本；上海教育出版社，,1998,p.1188,：,“评价，,evaluation,，指事物价值的判断,”,美国,A.S.,雷伯 著，李伯黍等译：,心理学词典,上海译文出版社，,1996,，,p.,290,：,evaluation,，一般说来指对于某事的价值作决定,什么是评价？,评价是从特定的目的出发，根据一定的标准，通过特定的程序对已经完成或正在从事的工作（或学习）进行检测，找出反映工作（或学习）进程的质量或成果的水平的资料或数据，从而对工作或学习）的质量或成果的水平做出合理的判断。,教育评价的内涵,在教育的领域对教育的政策方针、管理行政、课程教学、教师发展等等各个方面进行评价。,目的在于促进学生、教师和学校以至整个教育事业的发展；,以国家的教育方针政策为依据，以教育的目标为标准；,包括量和质两个方面的方法；,包括对教育过程与教育效果进行评价；,通过规范而有效的程序收集数据和资料，作出判断；,评价的结果有鉴定、诊断和导向的意义。,在比较狭义的范围内，教育评价通常关注的是：,学校的评价,课程的评价,教材的评价,教学的评价,教师的评价,学生的评价,学习的评价,教育评价的主要功能,导向功能,引导评价对象朝着理想的目标前进,鉴定功能,认定判断对象所达到的水平和质量,改进功能,促进评价对象改进和完善其行动,调控功能,通过反馈对评价对象的活动进行调节和控制,服务功能,利用评价结果为教育决策服务,参考金娣、王刚编著：,教育评价与测量,教育评价的主要类型,按评价范围分类：宏观、中观、微观,按评价内容分类：条件、过程、成果,按评价基准分类：相对、绝对、个体内部差异,按评价主体分类：自我、他人,按评价的时间和作用分类：诊断、形成、终结,按评价方法分类：定量、定性,按评价对象的复杂程度分类：单项、综合,参考金娣、王刚编著：,教育评价与测量,教育评价的要素,为什么要进行评价？评价的目的是什么？,以什么理念来指导评价？评价的原则是什么？,以什么为标准进行评价？,谁来评价？评价的实施者是谁？,评价谁？评价的对象是谁？,评价什么？评价的内容是什么？,怎样进行评价？评价的方法和程序怎么样？,如何解释、利用评价的结果？评价有什么样的功能？,高考命题的基本要求,高考的理念与基本问题,高考的目的是什么？,高考的原则是什么？,高考的标准是什么？,高考由谁来实施？,高考的对象是谁？,高考的内容是什么？,高考的方法和程序怎样？,高考的结果如何解释,高考的目的是什么？,检查,情况,找出,差距,发现,问题,明确,方向,肯定,成绩,促进,发展,高考的目的非常,具体，就是为选,拔高校新生提供,依据。这实际上,是通过对学生已,有基础的检查来,预测其未来发展，让符合其发展预,期的学生进入学,校学习，最终还,是为了学生的充,分发展。,高考的原则,评价学生的素质和学习潜力,符合新课程的理念要求,三个有助于,公平公正,作为一项功利性极强的公开,考试，高考必须同时兼顾各,方的要求。这些要求从表面,上看有时是不协调、甚至是,矛盾的。因此，高考的命题,必须设法协调各方的要求，,这是对高考命题人员素质的,最大考验。,高考的标准,课程标准,考试大纲,范例样题,前述三方面的标准，第一和第二,方面规定了考试的范围，对考试,的深浅程度却难以规范。第三种,比较具体，但却不是一种相对稳,定的标准。实际上，由于高考是,一种常模参照的考试，它采用的,是一种以全体考生为参照的相对,标准，没有绝对的标准要求，其,实际标准也就随考生水平的变化,而水涨船高。这是目前的高,考所存在的严重问题之一。,谁来评价？,外部评价者,上级,专家,社会,家长,教师,学校,内部评价者,学生,教师,学校,高考是一种典型的外部评价，最大优点就在,于其公平性，而最大的问题在于其有效性。,由于时间和形式的限制，高考不可能全面地,考查学生的素质。因此，怎样使得考试更有,效地、更全面地反映基本素质，是进行试卷,设计的时候需要考虑的问题。,评价什么？,情感,知识,方法,技能,认知、思维、实践能力,态度,价值观,非智力品质,在目前的考试形式下，高考难以考查学生,的非智力品质所，也难以考查真正联系实,际、解决问题的能力。高考可能考查的是,一些基本的知识和技能，包括思维的技能,和专业的技能，这构成了与人文和科学素,养密切相关的基本“能力”，构成了所谓创,新能力的基础，对考生的未来发展潜力有,一定的预测功能。这也是高考为大众所普,遍接受的原因。不要给高考提一些不可能,实现的要求，如：跨学科的综合能力、解,决实际问题的能力等等。因此，高考题目,设计应该围绕高中课程的基本内容和基本,要求来展开，不要随意地超纲，把高考题,变成“竞赛题”。,评价,方法,模型,标准,工具,有效？,可信？,可行？,所谓模型，指的是构成该体系或过程的要素和,要素之间的关系。高考的模型是比较复杂的，,从大的方面来所，它包括了社会环境、教育导,向、中学课程、高等学校、高中学校、考生、,教师、命题人员、招生工作管理人员、等等。,如果只看命题，这以模型就要简单一些，主要,是命题人员、考生、中学课程和大学要求四个,方面。,高考主要采用书面笔试的方式，因为考试规模,非常大，控制阅卷的误差很不容易，因此试题,主要采用有唯一正确答案的题目，,大量需要灵,活思考、没有唯一正确解答的试题不太可能出,现在高考试卷中。,这就使高考所能考查的能力,受到很大的局限，考试效度大受影响。总体上,看，高考只能考查到学生对知识的了解和理解，,以及较低层次的思维和表达能力。要提高高考,的效度，一定要打破纸笔考试的局限，打破封,闭式试题的局限。,评价的解释以教育目标,为参照,以自身发,展为参照,以同辈,为参照,高考是一种以同辈为参照（常模参照）的,考试，这就要求我们以常模为基础进行计,分，而不是以绝对水平为基础进行计分。,当然常模参照的考试和目标参照的解释并,不是非此即彼、互不相容的两个对立面，,高考的第一需要是按考试结果对考生排队，,这时应采用常模参照的计分方法。高考的,结果又可以用来检查高中教学中存在的问,题，这时应利用水平参照的计分方法。,新课程背景下高考改革的方向,高考改革与新课程改革,高考改革是否新课程评价改革的一部分？,是,不是,高考必须以高中学生的课程为考试的基点，随课程的改变而改变,高考对高中教学有很强的回流作用,高考带有评价高中教学效果的成分,高考是一次社会性很强的公众考试,高考主要是为选拔高等学校新生的考试,高考有其自身的规律,不完全是,两难问题,高考改革必须与新,课程同步,高考改革不可能,完全与新课程同步,高考存在的问题,三个方面,高考的功能定位问题,高考的方式方法问题,高考结果的合理利用问题,六大问题,将高考定位为选拔性考试，是造成试卷实际难度逐步加大的原因。,单一的笔试形式造成对学生全面发展的忽视。,封闭式试题影响了高层次的认知能力的发展。,唯一的考卷加重了学生的负担，不利于学生特长的培养。,计分方法不合理。,以省为单位排总分划分数线的做法，极度夸大了考试分数的价值，负面影响极大。,现行高考制度的正面作用高考是世界各国普遍采取的选拔方法之一。,统一高考是新中国成立以后采取的一项重要措施，大大提高了行政效率，为方便了考生的应考和高校的选拔。,“文化大革命”的历史教训告诉我们，取消高考带来的是高等教育的沦落和整个教育体系的崩溃。,恢复高考是打倒“四人帮”以后，教育战线拨乱反正的头件大事，给惨遭文革摧残的教育系统带来重生，给逐步恢复的中小学教学秩序的带来稳定和保障。,高考有严密的规范程序和公开统一的标准，是公众心目中一块保持社会公平公正的“绿洲”，对整个社会稳定起到一种不可或替的作用。,高考为青少年学生树立了一个具体的人生奋斗目标，对青少年的成长有积极的激励作用,高考必修根据新课程的理念、要求、内容和实际实施情况进行改革。,高考和应试教育没有必然的联系，不能冀望通过高考改革来消除应试教育。应试教育的主要根源在于：,急功近利思想的泛滥,以管理经济（生产）的方法和量化的“硬”指标来管理教育，“见物不见人”。,社会诚信普遍缺失。,教育职业道德的崩溃,新课程背景下高考改革的方向,高考的改革不能以全盘否定和取消高考为前提，否则会对整个社会和教育事业所带来破坏性的影响。,高考的全面深入改革，不仅是考试和招生技术的改革，更有待于社会的进步和教育的全面改革，不能幻想“毕其功于一役”。,恰如其分地估计高考制度的利弊，是高考改革成功的起点。,考试只是一种工具，有所能必有所不能，大学招生不能单纯依赖考试一种方法。,高考的改革必须与招生制度的改革同时进行，或者说必须在招生制度改革的前提下进行。,高考改革的切入点,将考试分为基础考试和能力考试两部分：基础考试以考查学生对基础知识的了解和相应的基本技能为主，保证考生具有全面均衡的基础知识；能力考试着重考查学生的能力，区分学生的不同水平。,逐步减少封闭式试题的权重，增加开放式试题的权重；适当提高试题的灵活性与综合性。,加大对评分的投入和研究，逐步减少开放式试题的评分误差。,必要时可增加面试或其他的辅助考试或选拔方法。逐步实现变单一的书面笔试形式为多种不同的考试形式，以考查不同形式的能力表现。,考试科目的设置应体现新课程既保证全面基础，又有利于个性特长的发展的理念。,坚持标准分的改革。,取消全省一条分数线的做法，按考生群体数划分数线，或进一步改由各学校根据报名和考试的情况自定报名的资格和录取分数线。,将高考从强调区分的常模参照考试改为强调水平的标准参照考试。,广东,07,高考方案,考试科目设置,3,文基,/,理基,X,3,语文、数学（分文、理）、英语（八级）,文基政、史、地（,70,）、理、化、生（,30,）,理基政、史、地（,30,）、理、化、生（,70,）,X,：,物理、化学、生物、思想政治、历史、地理、音乐术科、美术术科、体育术科,考生学科组合,文科专业：语数（文）英文基政,/,史,/,地,理科专业：语数（理）英理基理,/,化,/,生,体育、艺术类：语数（文,/,理）英文基,/,理基术科,成绩组成,文科,/,理科按原始分，满分为,1503,150,150,750,分,艺术类,4,科文化课成绩总和再转化为标准分，术科成绩单列,分数线：分文科、理科、体育、艺术,投档和录取：,从高分到低分投档,根据分数和综合素质评定的结果择优录取,学科门类与专业选考科目参照表,学科门类,专业选考科目,哲学、文学（艺术类除外）、历史学以及中医、中药学,思想政治、历史、地理、物理、化学、生物,艺术类,音乐术科、美术术科,工学、理学（生物科学类、地理科学类、环境科学类、心理学类四个一级学科除外）,物理、化学,经济学、管理学以及职业教育类、生物科学类、地理科学类、环境科学类、心理学类、药学类（除中药学类外）等六个一级学科,思想政治、历史、地理、物理、化学、生物,法学,物理、化学、生物、思想政治、历史、地理,教育学（职业教育类一级学科除外）,物理、化学、生物、思想政治、历史、地理,农学,物理、化学、生物,医学,物理、化学、生物,体育类,体育术科,对广东方案的评议,方案的科目设置，体现了新课程既保障共同基础，又让学生有自由选择和自主发展空间的理念。,方案明确将综合素质评定列为高校招生的参考，初步体现全面考查学生素质的理念，对高中学校落实素质教育有良好的导向作用。,方案对考生群体进行文、理分组，较好地解决了目前广东由于文理不分而造成的考生分布不均衡现象以及由此产生的公平性问题和其他问题。,方案在总结现行大综合考试经验和问题的基础上，设置了“文科基础,/,理科基础”这一新的考试科目，对学校教学有良好的导向作用，相对缓解了对学生的压力。,综合素质评价方案有待进行深入研究,“文科基础,/,理科基础”科目的考试属于水平性考试，是否将其分数也加入到总分中，应进一步研究。,方案解决了目前存在的文科与理科考生分布的合理性问题，但是还没有解决文科内、理科内不同学科的考生分布不合理问题。实行原始分相加以后，因学科性质不同、试题难异程度不同而造成的不同群体考生之间的不公平问题仍没有解决，需要进一步研究。,应注意研究选科对录取工作的影响，进一步细化相关操作措施3+3+,基础会考。,文史类：语、数、外、政、历、地；,理工类：语、数、外、理、化、生；,体育类：理工类术科。,艺术类：文史类术科。,基础会考,文科类：物理、化学、生物、通用技术和信息技术，,理科类：政治、历史、地理、通用技术和信息技术。,分值：语、数、英,150,分；政、史、地、理、化、生,100,分。,基础会考：理化生（或政史地）合卷，,300,分；通用技术和信息技术，,100,分，按,10%,计入总分。,海南高考方案,对海南高考方案评议,指导思想明确，体现了新课程的改革方向，针对现有招生考试方法的利弊得失进行改革，考虑本省的省情，可操作。,问题,考试科目偏多,基础会考性质与高考不同，两种考试分数不等值，直接相加不合理,“通用技术和信息技术”的考试方法应偏重于实践操作,综合素质评价方案在可信性、可用性方面应做进一步研究,所谓“超量给题限量做题”的方法，在技术上需要进一步研究,在统一的高中会考基础上进行,3+,文综,/,理综,3,：语、数、外，必考，各,150,分。,文综：政、史、地，,300,分,理综：理、化、生，,300,分,宁夏高考方案,对宁夏高考方案评议,特点,继承了现行“,3+,小综合”的高考模式，通过调整考试内容（保持科目设置基本不变），来适应新课程要求，力图实现新旧考试的平稳过渡。,增设了学生学业水平测试和理科实验操作测试，作为高考准入的资格考试。,方案中还设计了学生综合素质评价，并作为高校录取时的参考依据。,问题,综合素质评价方案在可信性、可用性需进一步研究。,不同学科、不同模块在命题中的等值性。,文,/,理科综合考试的长试卷的设计有技术难度。,缺乏录取方式的改革。,3+X+1,3,：语、数（分文,/,理）、外，必考，各,150,分,X,：文综或理综，必修部分选修内容；各,200,分,1,：基本能力：技术、体育与健康、艺术、综合实践等以及运用所学知识解决生活和社会实际问题的能力，必考。,艺术类、体育类考理综,山东高考方案,对山东高考方案评议,特点,与高中学生学业水平考试制度同步互补，学业水平考试以等第计算成绩作为高校录取参考；,学业水平考试允许重考问题,综合科目涉及长试卷，需要进一步研究不同模块考试分数的等值问题，以及学生使用和考试管理的可操作性。,“基本能力”考试不宜作为高考的必考科目。,综合素质评价方案在可信性、可用性,江苏初步方案,科目设置：,统考科目：语文、数学、外语,学业水平测试科目：政治、历史、地理、物理、化学、生物、技术,选修科目：,在历史与物理两科中选一科（,2,选,1,）；,在政治、地理、化学、生物四科中选一科（,4,选,1,）。,必修科目：政治、历史、地理、物理、化学、生物、技术等七科中，除去必修科目的五科。,艺术类、体育类考生：,选修科目为艺术或体育；如不兼报普通类专业，可选报,7,门必修科目（政治、历史、地理物理、化学、生物、技术）,例子：,某考生选定物理为选修科，若再选化学,（生物）为选修科，必修科目为：政治、,历史、地理、生物（化学）、技术等,5,科；,另一考生选定历史为选修科，若再选,政治（地理）为选修，必修科目为：地理,（政治）、物理、化学、生物、技术等,5,科。,考试时间,统考科目：每年,6,月,7,、,8,日；语文,150,分钟，数学、外语,120,分钟。,学业水平测试科目：,技术、外语口试、艺术、体育的测试时间另行安排，其他,选修科目：每年,4,月,7,日，高三学生参考，在校期间只能报考,1,次，每科考试,90,分钟；,必修科目：每年,4,月,8,9,日，高二、高三学生参考，在校期间可报考,2,次，每科考试,60,分钟。,考试内容和分数,统考科目：,语文：必做题,230,分，附加题,60,分,数学：必做题,230,分，附加题,60,分；必做题考查必修选修系列,1,内容，附加题考选修系列,2,4,内容。,外语：,230,分,总分：必做,690,分；必做附加,750,分。,学业水平测试科目：,政治：,作为必修,：模块,1,、,2,、,4,；,作为选修,：模块,1,、,2,、,3,、,4,，并在“经济学常识”、“国家和国际组织常识”两模块中,2,选,1,。,历史：,作为必修,：模块,1,、,2,、,3,；,作为选修,：模块,1,、,2,、,3,，并在“历史上重大改革回眸”、“中外历史人物评说”、“探索历史中的奥秘”、“世界文化遗产荟萃”四模块中,4,选,2,。,地理：,作为必修,：模块,1,、,2,、,3,；,作为选修,：模块,1,、,2,、,3,，并在“海洋地理”、“旅游地理”、“城乡规划”、“环境保护”等四模块中,4,选,2,。,物理：,作为必修,：模块,1,、,2,，并在,1,1,或,3,1,中选,1,模块；,作为选修,：模块,1,、,2,、,3,1,，并在,3,2,、,3,3,、,3,4,、,3,5,中,4,选,3,。,化学：,作为必修,：模块,1,、,2,、并在“化学与生活”、“有机化学基础”两模块中,2,选,1,；,作为选修,：模块,1,、,2,，并在有机化学基础”、“化学反应原理”、“物质结构与性质”、“实验化学”四模块中,4,选,3,。,生物：,作为必修,：模块,1,、,2,、,3,；,作为选修,：模块,1,、,2,、,3,，和“生物技术实践”、“现代生物科技专题”两模块。,评分方法：卷面原始分,100,分，再按下面方法分等级,选修科目：,90,100,评为,A,等；,75,89,评为,B,等；,60,74,评为,C,等；,59,评为,D,等,必修科目：前,20,评为,A,等；前,21,50,评为,B,等；前,51,90,评为,C,等；最后,10,D,等。,综合素质评价,道德品质：及格,/,不及格,公民素养：及格,/,不及格,交流与合作：及格,/,不及格,学习能力：,A,、,B,、,C,、,D,运动与健康：,A,、,B,、,C,、,D,审美与表现：,A,、,B,、,C,、,D,录取,划线：按语文、数学、外语三统考科的成绩（不含附加分）划线。,填报志愿：必修科目测试有三门为,D,，没资格填报志愿；填报专科院校要求,5,门必修科目至少有,3,门达到,C,级，,2,门选修科目至少有一门达到,C,级；填报本科院校要求,5,门必修科目等级都达到,C,级及以上，,2,门选修科目等级均在,B,级及以上等级。,投档：按语文、数学、外语三统考科的总成绩（含附加分）投档；,艺术、体育类按语文、数学、外语三统考科的成绩（不含附加分）和专业加试成绩投档；,第一次参加必修科目和选修科目测试，六门（不含技术测试）的成绩都达到,A,级的，加,20,分投档。,综合素质评价全优（三项合格、三项,A,），在同批省控制线上无条件投档（不受学校投档比例和录取分数线限制）。,一个梦想的学科设置方案,+,所有考生必考，按领域分类的基础考试，以拼盘方式组合试卷,3,X,语言文学基础（语文、外语必修内容加作文）,人文社科基础（政治、历史、地理必修内容）,自然科学基础（数学、物理、化学、生物必修内容）,高校指定,学生选考,语文、数学、外语、政治、历史、地理、生物、化学、物理,学科相关内容,对高考复习的几点建议,高考复习要处理好五个关系,考试说明和课程标准、教材的关系,直接依据考试说明，全面依托课程标准，依托教材而不死扣教材,知识理解与解题的关系,重在理解，适当训练，有套路而不执迷于套路,重点知识和一般知识的关系,抓紧重点，不忘一般,注意联系实际、新知识,难题与基础之间的关系,基础扎实，量力而行,学科之间的关系,全面均衡，有所侧重,把复习课当新课来上,要在新的高度上来整理所学的基本知识,全方位、多角度认识所学的基本知识,注意建立相关知识的联系，形成合理的知识结构,注意知识的条件和应用范围,把握好知识的特点,重点突出，全面照顾,重点知识是学科知识结构中处于联结中心，起挈纲带领作用的知识,成为其他知识的基础的知识,重点知识是学生能力发展的重要依托,非重点知识是往往理论联系实际的桥梁,非重点知识的重复少，遗忘率高,针对难点和学生在能力上的薄弱环节进行强化训练,对本学科的难点要有全面和深入的分析,难在哪里,学生的常见错误及其原因,把握分寸，适量精练,提倡学生独立思考，从联系中找到解决问题的思路，而不是解答问题的套路,要给学生留下发挥的余地,让学生自行归纳和建构知识体系,在规范化的训练中，要给优秀学生留下自己发挥的余地,不要追求进度，由教师代学生解决难题,大胆采用多样化的教学方法,兵教兵,合作学习,欢迎批评指正！,谢谢！,,了解新课程评价改革和高考新信息,欢迎登陆“新思考”网,“学业成绩评价”网站,