考评技术和考评方法专题培训课件.ppt

引言引言n考评人员除具备必要的资格条件和职业考评人员除具备必要的资格条件和职业道德素质外，应当重点掌握本职业的考道德素质外，应当重点掌握本职业的考评技术和考评方法，才能客观公正、科评技术和考评方法，才能客观公正、科学规范地完成考评任务。学规范地完成考评任务。一、考评员的主要任务一、考评员的主要任务考考评评人人员员主主要要任任务务接受鉴定任务接受鉴定任务知识考场的设置和知识考场的设置和环境等条件进行检查环境等条件进行检查 按照评分标准和按照评分标准和要求评审要求评审职业标准职业标准鉴定的项目鉴定的项目内容内容方法方法要求要求评分标准评分标准配合做好考务工作配合做好考务工作提出意见和建议提出意见和建议熟悉考评业务熟悉考评业务 撰写考评报告撰写考评报告二、考评人员的职责二、考评人员的职责（1）应严格按照规定的应严格按照规定的考核方式、方法和评分标考核方式、方法和评分标准准,完成评分任务，完成评分任务，填写考评记录。填写考评记录。（5）考评人员对考评现场发考评人员对考评现场发生的违纪行为生的违纪行为，视情节轻重给，视情节轻重给予处理，并向上级部门报告予处理，并向上级部门报告（4）考评人员在执行考评任考评人员在执行考评任务时，实行亲属回避制度。务时，实行亲属回避制度。（3）考评人员应严格执行考考评人员应严格执行考评人员工作守则和考场规则评人员工作守则和考场规则负责场地等检查和检验负责场地等检查和检验（2）独立判分的权利，有权独立判分的权利，有权拒绝任何单位和个人更改鉴定拒绝任何单位和个人更改鉴定结果的非正当要求。结果的非正当要求。（6）考评人员权益受到损害时，考评人员权益受到损害时，可向职业技能鉴定指导中心申诉。可向职业技能鉴定指导中心申诉。（10）考评组长应具备考评组长应具备相应的评判水平和组织能力，相应的评判水平和组织能力，每次考评工作完成后，向职每次考评工作完成后，向职业技能鉴定指导中心业技能鉴定指导中心提交考评报告。提交考评报告。（9）考评组成员每次轮考评组成员每次轮换不得少于三分之一换不得少于三分之一，在在同一职业鉴定所内不得同一职业鉴定所内不得连续超过连续超过3次次（8）职业技能鉴定指导中心采职业技能鉴定指导中心采取轮换方式派遣考评人员，组成取轮换方式派遣考评人员，组成成考评小组，并制定考评组长。成考评小组，并制定考评组长。（7）各级职业技能鉴定指导中各级职业技能鉴定指导中心必须维护考评人员的合法权利。心必须维护考评人员的合法权利。二、考评人员的职责二、考评人员的职责三、考评的工作特征考评考评是考评人员独立地依据考评标准和规定的是考评人员独立地依据考评标准和规定的考评技术方法与手段，对鉴定对象技能水平进考评技术方法与手段，对鉴定对象技能水平进行客观、公正的评价和评定。行客观、公正的评价和评定。标准性标准性规范性规范性 独立性独立性权威性权威性 技术性技术性复杂复杂 性性变化性变化性 创新性创新性 考评技术主要特征考评技术主要特征考评的工作特征考评的工作特征考评的工作特征考评的工作特征四、考评的技术种类四、考评的技术种类-（1）识记型识记型（A）国家职业标准国家职业标准知识知识技能技能应用型应用型心智型心智型操作型操作型技术型技术型 职业标准知识和技能的分类职业标准知识和技能的分类n知识层面的分类：知识层面的分类：1.识记型识记型：主要指职业技能所需的知识，即职业标准主要指职业技能所需的知识，即职业标准中的基础知识部分和部分心智技能。认知程度一般中的基础知识部分和部分心智技能。认知程度一般分为了解、熟悉、掌握三个等次。分为了解、熟悉、掌握三个等次。2.应用型：主要指运用专业知识去认识、分析和解决应用型：主要指运用专业知识去认识、分析和解决问题的能力。主要体现在职业标准知识的掌握和部问题的能力。主要体现在职业标准知识的掌握和部分心智技能与技术技能的运用上。认知程度一般分分心智技能与技术技能的运用上。认知程度一般分为了解、掌握、运用三个等次。为了解、掌握、运用三个等次。职业标准知识和技能的分类职业标准知识和技能的分类n技能层面的分类：技能层面的分类：1.操作型：操作型：主要指借助动作的力度、协调性及敏捷性等能力进行操作的技能，是职业技能中最常见的一种技能类型。此类测评一般分为模仿、掌握、熟练三个等次。2.心智型：心智型：它主要指需要通过判断、思维等来形成能力类的技能，它是与操作型相对应的另一种技能类型，适用于知识与技能界限比较模糊的职业。测评程度一般分为了解、掌握、应用三个等次。3.技术型：技术型：主要指应用知识转化为能力的技能，它适用于技术含量较高的职业，如数控加工和计算机等职业。四、考评的技术种类四、考评的技术种类-（2）技师以上的考评技师以上的考评采用此类别比较多采用此类别比较多 考评的主要形式，内考评的主要形式，内容上广度与深度相结容上广度与深度相结合和合和以文字图像作答以文字图像作答是它的基本特征。是它的基本特征。（B）考评技术种类考评技术种类 综合类综合类 操作类操作类 技能鉴定特有的主要的技能鉴定特有的主要的考评形式，是一种直接考评形式，是一种直接的非文字的考评，通过的非文字的考评，通过现场（全真、半真、模现场（全真、半真、模拟）技能操作完成考核拟）技能操作完成考核项目是它的基本特征项目是它的基本特征 论文类论文类 考评的技术分类（考评的技术分类（2）n综合类综合类-考评内容上广度与深度相结合、以文字文字图象回答问题图象回答问题。它的主要方法：通过试卷试题对知识认知程度和心智类技能水平进行测试。n操作类操作类-通过现场技能操作完成考核项目。它的主要方法：是通过一个或几个考核项目对上述技能所需的熟练和准确程度进行测评。n论文类论文类-笔试与面试并用。它的主要方法：采用以深度为主、广度为辅的办法来全面检查鉴定对象现有技术知识、理论素质、学术水平、技能水平和综合分析解决实际问题的能力。五、考评方法l考评方法：考评方法：考评方法是考评技术的具体体现。l 问卷法问卷法（文字直接质问法）l 操演法：操演法：l 口试法：口试法：以论文、抽签题目和音像片等为测试中介题目，对鉴定对象测试结果进行评价。n 阅卷法：阅卷法：以论文为中介对鉴定对象的能力进行分析、评价。操操演演法法以真实的工作环境和以真实的工作环境和条件对劳动者实际技条件对劳动者实际技能水平进行考评能水平进行考评以现场考评为基础形以现场考评为基础形成的考评方式成的考评方式以半模拟或全模拟真以半模拟或全模拟真实工作情景或工作情实工作情景或工作情景下的考评方式景下的考评方式模块模块知识类知识类技能类技能类技能类型技能类型考评种类考评种类考评方法考评方法识记型识记型应用型应用型心智型心智型操作型操作型技术型技术型综合类综合类论文类论文类操作类操作类问卷法问卷法口试法口试法阅卷法阅卷法操演法操演法现场操作法现场操作法典型作业法典型作业法模拟操作法模拟操作法职业技能类型、考评技术、方法手段对应构成图职业技能类型、考评技术、方法手段对应构成图六、技能考核评分技巧六、技能考核评分技巧n减分法：减分法：根据评分标准设想出最完美的表现得满分，然后认真观察考生表现，当考生出现失误大或工作不理想时，按指标相应减分。此方法，考评员的心理负荷较低，但观察不认真或经验不足时，容易产生 较多考生得满分。n加分法：加分法：与减分法相反，先确定一个最可能出现的最低分，当考生优于基准表现时，相应加分，劣于基准表现时减分。此方法可以拉开考生得分差距，较少出现满分。实际使用加分法时，可能即要加分，以要做减分，考评员心理负荷较大。七、评定偏差七、评定偏差n职业技能鉴定考评工作主要靠考评人员对考生行为及其结果的判断，任何人的判断都可能发生错误，考评员也不例外。n评定偏差：评定偏差：绩效评定中凡是非故意歪曲的判断结果与事实的偏离。n控制偏差因素，将偏差的影响控制到最小，获得高质量的考评结果。偏差产生原因偏差产生原因人的认识能力的局限。借助仪器弥补自己感觉能力的不足，但对仪器测量结果仍要根据自己的差别感受作出判断。人的经验和知识的局限。疲劳、厌倦、紧张、不认真等都可能增大评定偏差。评定偏差的类型评定偏差的类型分布偏差：分布偏差：评定的分布偏差偏离正态分布。l宽厚偏差：宽厚偏差：评定结果偏于高水平段。评定者掌握评定标准过于宽松。l苛严偏差：苛严偏差：评定结果偏于低水平段。评定者掌握评定标准过于苛刻。l集中趋势：集中趋势：评定成绩过于集中某一水平段。评定者观察被评定者的行为表现不够，或对评定标准的区分程度掌握不够，或不希望得罪任何人所致。评定偏差的类型评定偏差的类型顺序效应：顺序效应：先前的评定对后继评定的影响。评定者往往倾向于以前一个被评定者或评定指标的评定结果作为后一个的直接参照。心理学研究表明：任何相邻的被评定者的评定结果的相关显著高于不相邻的被害人评定者。控制措施：每个考评员每次只就一个评定指标评定所有考生；各考评员的评定指标随机排序等抵销顺序效应的影响。评定偏差的类型评定偏差的类型自我中心效应：自我中心效应：评定者暗自以自己认可的评定标准取代规定标准。当评定标准较粗陋，评定者对此争议较大，或对评定标准的说明不够明确，评定者对评定标准有各自的理解时，这种偏差最容易发生。克服：加强考评员培训，树立正确的考评考评工作态度，掌握正确的考评标准，正确理解评定指标的意图。评定偏差的类型评定偏差的类型光晕效应（晕轮效应）：光晕效应（晕轮效应）：评定者对被评定者某一方面的强烈印象影响其对被评定者其他方面的判断。“先入为主、以偏概全先入为主、以偏概全”评定者容易被被评定者某一方面的表现所蒙蔽，而对其它的特性认识不清甚至根本无法发现，在考核中，如果存在晕轮效应，考核者只能被考核者的优（缺）点发生兴趣而无视其缺（优）点。评定偏差的类型评定偏差的类型相似效应：相似效应：评定者对于被评定者所表现出的与自己相似的经历、思想和行为，往往有更多的兴趣，对这样的考生易产生好感，进而影响评分。八、考评行为对考生的影响八、考评行为对考生的影响n人的活动会受到他人在场的影响。n内向、缺乏自信的人，他人在场会使其活动动机降低，活动效率下降。n外向、好显示自己的人，当从事精细动作操作或复杂、困难的心智操作时，他人在场也可能降低活动效率，提高差错率。n考评员的言语、表情、视线、手势、体势等都可能对考生产生暗示作用，增加考生心理紧张和压力，从而影响工作行为。考评行为对考生的影响考评行为对考生的影响n职业技能鉴定场所，考评员不到现场进行考评是不可能的，考场规则要求考评员和其他工作人员尽可能控制与考评工作无关行为，最大限度减少对考生应试行为的影响。n考评员应注意不以任何方式暗示考生，努力控制容易被人理解为暗示作用的行为，如点头、摇头、长时间盯住某个地方、微笑、皱眉、随着考生动作做手势、考评人员彼此耳语等。n不向考生提出考核中没有要求的问题，如为什么要这样做、想想看怎样做才对等。九、鉴定实施的主要步骤九、鉴定实施的主要步骤 实施职业技能鉴定考试活动的全过程，粗略地分为鉴定组织、鉴定准备、鉴定施测和鉴定结果处理四个工作阶段。这里，我们重点讲鉴定我们重点讲鉴定施测环节。施测环节。鉴定规划、鉴定公告、监督、制卷、成绩认定、核发证书等组织报名审查登记考场准备考试施测评定成绩登记1）鉴定组织的内容与要求组织鉴定考试活动的各种因素以所制定的鉴定实施方案妥善地安排各项工作内容约束鉴定活动的主体及鉴定对象，按规定的形式和要求参加职业技能鉴定活动制定制定实施方案实施方案发布发布鉴定公告鉴定公告审查申报审查申报条件和资格条件和资格报名登记报名登记和分类统计和分类统计1）鉴定组织的内容与要求1、制定实施方案制定实施方案 职业技能鉴定的实施方案是确定着某次职业技能鉴定的工作方式、职业技能鉴定的实施方案是确定着某次职业技能鉴定的工作方式、工作内容和要求以及整个工作安排的工作方案。工作内容和要求以及整个工作安排的工作方案。方案包含内容：方案包含内容：鉴定的范围（工种名称、定义）；鉴定的范围（工种名称、定义）；鉴定的标准和方法（所依据的考试标准和所采用的考试方法）；鉴定的标准和方法（所依据的考试标准和所采用的考试方法）；鉴定的工作日程安排（考试的日期和时间安排）；鉴定的工作日程安排（考试的日期和时间安排）；工作事项说明（重要事项的说明、考点、考场设置和分布、耗材）工作事项说明（重要事项的说明、考点、考场设置和分布、耗材）1）鉴定组织的内容与要求2、发布鉴定公告发布鉴定公告 公告包含内容：公告包含内容：n工种名称、定义和适用范围；工种名称、定义和适用范围；n各工种的考试标准、方法或指定的鉴定资料；各工种的考试标准、方法或指定的鉴定资料；n报名条件和手续、时间期限、收费项目和标准；报名条件和手续、时间期限、收费项目和标准；n考试的科目、时间和地点或以准考证的方式确定；考试的科目、时间和地点或以准考证的方式确定；另外，如不能在报名当时填发准考证时，还另外，如不能在报名当时填发准考证时，还应告知准考证的发放时间和办法。应告知准考证的发放时间和办法。1）鉴定组织的内容与要求3、审查申报条件和资格、审查申报条件和资格 查看职业技能鉴定申报表查看职业技能鉴定申报表常规信息：如姓名、身份证号、年龄、照片是常规信息：如姓名、身份证号、年龄、照片是否符合要求等否符合要求等条件信息：如从事工作年限、申报鉴定工种条件信息：如从事工作年限、申报鉴定工种（必须是工种目录表上有的）（必须是工种目录表上有的）特殊信息：职业活动和职业培训方面的经历特殊信息：职业活动和职业培训方面的经历（查看证书）（查看证书）4、报名登记和分类统计报名登记和分类统计2）鉴定准备的内容与要求 合理地安排实施鉴定的人员、场地和设备，提供相应的技术手段和保障条件是保证职业技能鉴定考试活动顺利进行的必要步骤。1、试卷准备与交接 职业技能鉴定试卷交接包括专业技术知识考试试卷及评分标准、操作技能考试技术准备通知单和操作技能考试试卷及评分标准、其它有关的说明材料。注意记录。2、考场准备与验收 专业技术知识考试采取按工种和级别相对集中的方法安排试场；操作技能考试的考场依情况不同确定；准备好考务、考评人员胸卡3）鉴定实施的内容与要求鉴定实施的内容与要求 鉴定施测由职业技能鉴定考评员和鉴定对象按统一的考场规则和考试方法共同完成测试，并产生测试结果。测试过程以测前准备、测试及测后清理为控制环节并按顺序进行。1 1、专业技术知识的测试与评分、专业技术知识的测试与评分2 2、操作技能测试与评分的特殊要求、操作技能测试与评分的特殊要求专业技术知识的测试与评分专业技术知识的测试与评分测试准备要求测试准备要求F领取试卷，领取试卷，核对试卷与所负责的监考任务是否吻合。核对试卷与所负责的监考任务是否吻合。F进入试场时，要对试场的准备情况进行大致的检查，进入试场时，要对试场的准备情况进行大致的检查，看试场准备工作是否符合规定的要求。考评员还要备看试场准备工作是否符合规定的要求。考评员还要备齐试卷装订和密封所用的工具和材料。齐试卷装订和密封所用的工具和材料。F考试开考前考试开考前15分钟后，考评员应及时组织鉴定对象入分钟后，考评员应及时组织鉴定对象入场，并检查准考证以免考生错场。场，并检查准考证以免考生错场。F鉴定对象入场完毕后，考评员当众宣布考场规则、重鉴定对象入场完毕后，考评员当众宣布考场规则、重申考场纪律和注意事项，指导鉴定对象准备测试。申考场纪律和注意事项，指导鉴定对象准备测试。专业技术知识的测试与评分专业技术知识的测试与评分测试要求测试要求从考试开始计时直到考试结束铃响，考试员和从考试开始计时直到考试结束铃响，考试员和鉴定对象的行为都称为测试。鉴定对象的行为都称为测试。测试期间考评员的工作主要是考场巡视。测试期间考评员的工作主要是考场巡视。考评员巡视考场的行为不应干扰鉴定对象的考考评员巡视考场的行为不应干扰鉴定对象的考试过程。试过程。考评员对所负责监考的考场情况，应按要求记考评员对所负责监考的考场情况，应按要求记载。载。专业技术知识的测试与评分专业技术知识的测试与评分测后清理要求测后清理要求考试规则规定所有的鉴定对象应在同一时间内完成考试，考考试规则规定所有的鉴定对象应在同一时间内完成考试，考试结束时，考试员应责令所有鉴定对象立即停止考试，并退试结束时，考试员应责令所有鉴定对象立即停止考试，并退场。场。试卷回收、装订密封以及试卷袋密封。试卷回收、装订密封以及试卷袋密封。缺考试卷一般在开考后缺考试卷一般在开考后30分钟回收。并将缺考者的考号填写分钟回收。并将缺考者的考号填写在试卷和考场情况记载表上，按序号装订成册。在试卷和考场情况记载表上，按序号装订成册。试卷装袋之前要核对试卷数量，确认与原发出的数量（包括试卷装袋之前要核对试卷数量，确认与原发出的数量（包括备份卷和缺考卷）一致后，贴专用封条，交考场办公室。备份卷和缺考卷）一致后，贴专用封条，交考场办公室。评卷、合分、统计、签字。评卷、合分、统计、签字。操作技能测试与评分的特殊要求操作技能测试与评分的特殊要求l操作技能的测试与评分需采用多种手段和方法。操作技能的测试与评分需采用多种手段和方法。l测前准备，检查考场的考试条件和安全。测前准备，检查考场的考试条件和安全。l测试过程中，考评员不仅要执行监考任务，还必测试过程中，考评员不仅要执行监考任务，还必须及时劝阻或制止各种违反操作规程的测试行为。须及时劝阻或制止各种违反操作规程的测试行为。l测试完成后，作好测试样本的回收、分类、标号测试完成后，作好测试样本的回收、分类、标号和封存工作。和封存工作。操作技能测试与评分的特殊要求操作技能测试与评分的特殊要求l考评员对评分标准有正确认识并一致，对所用测评用具的考评员对评分标准有正确认识并一致，对所用测评用具的精确程度及使用方法也应统一。精确程度及使用方法也应统一。l行为反应为测试内容时，通常只能以行为反应为测试内容时，通常只能以“考评合一考评合一”的方式的方式进行；进行；l操作过程的行为结果主测试内容时，则可以采用操作过程的行为结果主测试内容时，则可以采用“考评分考评分开开”的方式。的方式。两种不同方式施测时，样本的存在形式和保存方法不两种不同方式施测时，样本的存在形式和保存方法不同，在检测评分时的组织方法、样本编号方法、时间安排同，在检测评分时的组织方法、样本编号方法、时间安排顺序上都有较大的差异。顺序上都有较大的差异。4）鉴定结果处理的内容与要求鉴定结果处理的内容与要求考试成绩必须经过统计分析和成绩认定后，才能真正成为核发职业资格证书的有效依据。1、统计分析：、统计分析：评价考试的质量 2、成绩认定：、成绩认定：试题有效性认定和考试质量分析处理 3、核发证书：、核发证书：据成绩认定结果、遵证书核发权限。十、考评的实施要点十、考评的实施要点n1）考前准备）考前准备n2）考评中）考评中n3）实施测评）实施测评n4）考评后技术资料汇总）考评后技术资料汇总1）考评前的准备工作）考评前的准备工作召集全体考评员会议。成立考评小级，推选考评组长，召集全体考评员会议。成立考评小级，推选考评组长，拆封试卷袋，拆封试卷袋，进行考题研究进行考题研究，制定考评实施方案（考，制定考评实施方案（考生分组、考试流程、考评员任务安排等）；生分组、考试流程、考评员任务安排等）；熟悉考试设备的性能及操作要领；熟悉考试设备的性能及操作要领；检查考试用仪器、仪表；检查考试用仪器、仪表；检查考场安全情况；检查考场安全情况；检查考场材料准备情况；检查考场材料准备情况；全体考生会议，说明考场的纪律和考试流程；全体考生会议，说明考场的纪律和考试流程；考生工位抽签。考生工位抽签。1.考题考题（1 1）阅读考题，了解实操考题的考点、要求；）阅读考题，了解实操考题的考点、要求；（2 2）了解复杂程度。）了解复杂程度。（3 3）了解考题的工艺过程；）了解考题的工艺过程；（4 4）了解考题所用到的仪器仪表；）了解考题所用到的仪器仪表；（5）考评前要检查图纸；）考评前要检查图纸；（6）考题的评分标准）考题的评分标准二、考评中二、考评中判断判断：1 1从读图识图的过程预测考生能力从读图识图的过程预测考生能力2 2从系统安装过程判断考生的接线工艺从系统安装过程判断考生的接线工艺3 3从系统操作判断考生对系统的熟悉情况；从系统操作判断考生对系统的熟悉情况；4 4从仪表的使用方法判断考生使用仪表能力从仪表的使用方法判断考生使用仪表能力5 5从系统程序判断考生的编程能力从系统程序判断考生的编程能力二、考评中二、考评中提示和干预提示和干预1 1操作明显不合理即将引起危险情况而考生又无查觉操作明显不合理即将引起危险情况而考生又无查觉时，应及时干预。时，应及时干预。记录记录1 1记录开始考试和结束考试的时间记录开始考试和结束考试的时间2 2记录考生实际操作的规范性。包括：着装、元器件记录考生实际操作的规范性。包括：着装、元器件 的摆放等的摆放等3 3记录考生完成操作的情况记录考生完成操作的情况4 4记录考试中考生的错误发生情况。记录考试中考生的错误发生情况。5 5记录其他原因造成的延误考试的情况记录其他原因造成的延误考试的情况三、现场评分三、现场评分四、考评后技术资料汇总四、考评后技术资料汇总