大数据应用背景下在线教学师生评价发展路径探究.pdf

在线教学中，教师评价和学生评价过程仍存在评价理念不科学、评价指标不科学、评价方式不科学等问题。在线教学师生评价发展应强调基于行为数据的客观评价、强调基于教学交互的全面评价、强调基于成长过程的发展评价，进一步强化数据治理理念、优化体系构建机制、推广评价结果应用、制定运行保障制度。关键词：在线教学；教学评价；数据治理；过程性评价中图分类号：G72文献标识码：A文章编号：1008-388X（2023）02-0065-04教学行为数据被重视和被挖掘，为教与学提供直接、有效的诊断和预测。人们不断呼吁加强数据应用和数据挖掘，研究人工智能赋能教学评价改革和实践框架1并基于学习分析技术建设在线学习测评系统2。但是总体上基于大数据的在线教学师生评价的研究和实践还不多，还存在不科学的教育评价导向、不科学的评价指标，以及不科学的评价方式。为此，基于大数据应用背景研究在线教学师生评价发展路径，以期为提升学生学习效率和效果、提升教师教学效率和效果、提升教学管理支撑能力和决策能力、助力学校与学习型社会协同治理能力提供有价值的建议。一、在线教学师生评价存在的问题1.评价理念不科学评价理念直接影响评价指标和评价方式的确定。一方面，在线教学师生评价重视任务目标的达成度，忽视任务目标之外的过程。学生评价注重考试成绩分数的高低、作业的完成率等，忽视学生在线学习过程中表现出的人际沟通、学习态度、协作能力等；教师评价注重教师所教授学生的优秀率、升学率、获奖率、通过率等，忽视教师在线教学过程中导学、助学、促学、督学等方面的精力投入；学生评价和教师评价更注重结果性评价，忽视过程性评价，忽视其在学习和教学过程中所取得的阶段性成效。另一方面，在线教学师生评价重视主观评价，忽视客观评价。教师教学评价与传统面授评价相类似，主要通过领导评教、督导评教、同行评教、学生评教等第三方评价方式实现，是评教主体根据一次或者几次教师教学表现给出的分数，这存在主观意愿影响偏差评教分数高的教师并不都是高质量的教学者，评教分数低有可能是要求严格的教师。除了学生考核分数这一客观评价方式外，学生评价则主要通过教师、同伴等第三方对其作业进行评价的方式实现，同样存在主观意愿影响偏差。比如韩凌等指出在大数据时代英语“精准教学”面临的瓶颈之一是“教学决策依赖主观经验”，不利于因材施教。教师评价和学生评价较少在教育大数据的支持下应用学习分析技术对教师和学生进行客观评价。32.评价指标不科学评价指标包括评价维度、评价权重，是学校对教学价值的直观判断，对教学质量的直观理解。一般情况下，学校自身有一套教学评价指标统一对教师教学过程进行直接评价，包括教学安排、教学策略、教学效果等方面。教师根据专业要求、课程要求等，对学生的评价指标各不相同，各有侧重。总的来说，学校对教师和学生的评价指标主要针对传统课堂制定，即使考虑在线教学的特殊性调整相关指标也未能较为全面评价教师教学效果或学生学习效果，主要表现在四个方面。一是评价指标忽视在线教学的特殊性和复杂性，普遍缺乏教与学过程的参与度、投入度等的指标维收稿日期：2022-10-11基金项目：2021年度广东省普通高校青年创新人才类项目（2021WQNCX306）；2021年粤港澳大湾区高校在线开放课程联盟教育教学研究和改革项目（WG-KMI014）作者简介：缪玲（1988-），女，湖南长沙人，助理研究员。大连教育学院学报度，缺乏关注教与学行为过程的引导，对支撑教师和学生进行过程性评价的力度不够。二是评价指标忽视依托现代信息技术的评价方式，普遍缺乏对教师和学生教与学过程和成效的增值评价，对支撑教师和学生进行发展性评价的力度不够，督促教师改进教学方案和促进学生调整学习策略的支撑力度不够。三是评价指标忽视对教与学行为数据的梳理，普遍缺乏对教师和学生评价模型的构建。当前部分学校关注网络学习空间数据的运用，但多是简单呈现客观数据，比如登录次数、在线时长等，未能实现深层次的汇聚数据、挖掘内涵，无法构建合理有效的教师和学生评价模型。四是评价指标忽视学生学习过程、学习成效。当前主要强调对教师教学行为的评判，从学校层面统一构建教学评价指标体系、课程评价指标体系等。学生学习行为的评判则主要交给授课教师，较少从学校层面统一评价维度关注学生的学习过程和学习成效，无法进行大规模的学生的横向比较以促进教师改进教学，无法支撑个性化教学指导。3.评价方式不科学当前，对在线教学教师的教学评价主要通过第三方听课或者浏览课程、实地巡查等形式，对在线教学学生的学习评价也主要通过任课教师对其所教授课程的回帖质量、考试测评等进行评价，这种主要依据课程表现的评价方式存在一定弊端。一是第三方在同一时间段内只能同时评价一位或者几位教师，存在以偏概全、无法横向比较评价教师的问题。此外，任课教师只能对学生在该课程中的表现进行评价，存在难以综合其他课程对学生学习表现进行整体评价。二是对教师的教学评价，一般情况下第三方评价集中在期初、期中或期末时段，比如学生评教一般在期末进行，难以做到对教师教学过程的跟踪评价。相类似的，对学生的学习评价，一般情况下教师也集中在期初、期中或期末时段进行阶段性测评，比如期中考试、期末作业。三是针对教师的教学评价，第三方总体评价报告发布滞后，无法引导教师及时调整教学方法。此外，在线教学要注重引导学生从被动学习转向主动学习，提升自主学习能力。但是，对学生的学习评价一般也是阶段性公布测评结果，甚至不公布测评结果直至学生学期结束后公布课程成绩，无法引导学生自主调整学习方法和策略。此外，对在线教学教师的教学评价，第三方通过听或者看教师一节或者几节课程就进行打分的方式无法准确、客观、全面评价教师。二、在线教学师生评价的目标导向1.强调基于行为数据的客观评价评价的首要原则应是客观如实。“基于经验”的教学范式依靠教师口头提问、肉眼观察、阶段测试等方式评判全班学生或某类学生整体水平的结果性评价，极易出现以偏概全的“晕轮效应”4。教与学行为大数据的统计、整合、分析、利用能够提高教与学评价的精准性、科学性和有效性。这里的教与学的数据是具体的、可衡量的，既包括教师“教”的教学行为数据，也包括学生“学”的学习行为数据。基于教师在线教学过程和学生在线学习过程的客观数据评价，从评价主体上来说可以将存储的教学和学习行为数据的客观结果与第三方评价、自我评价结合起来，形成对教师和学生的完整评价；从评价内容上来说，信息技术平台上记录的教师教学过程中表现出来的教学特点、教学规律和学生学习过程中表现出来的学习特点、认知规律等行为数据，能够使教师和学生的评价更加立体、生动，也有助其基于行为数据进行反思和提升；从评价结果上来看，信息技术平台终将会将教师和学生的表现以“电子档案”的形式呈现，该档案能基于客观行为数据描绘出教师教学和学生学习的优势与劣势，帮助他人精准掌握教学现状、努力方向和教学策略，最终实现对教师和学生的准确性评估。因此在线教学教师和学生评价要充分考虑基于客观统计数据的评价，通过大数据的采集、分析和运用，建立起及时、精准的评价体系及自我改进与发展的评价文化。2.强调基于教学交互的全面评价教学交互是远程教育中教学过程和学习过程的基本功能属性5。所有教学交互活动的目的是通过各种相互交流和相互作用，改变学习者的行为，从而实现教学目标。因此，基于教学交互对教师和学生进行评价要强调全面评价。全面评价主要包括三层含义。一是评价对象面向全体教师和全体学生。在线教育中教师类型分为责任教师、主讲教师、辅导教师、导修教师等，各类教师职责分工各不相同。教师评价应面向全体教师，不是面向部分类别教师，不是面向骨干教师，而是不分类别、年龄、经历的无差别的包括管理者在内的全体教师都要接受评价。二是评价内容囊括教师教和学生学的诸多方面。在线教学教师教和学生学不仅包括教师、学生和学习资源三大教学要素之间的信息交互过程，还包括信息交互成效，即达到概念交互促进学生有效学习。教学交互成效一方面反映学生学习目标的达成情况，另一方面也是教师教学能力的体现。教师和学 66大连教育学院学报生在教与学过程中的自主性、协作性、参与度等因素都可能纳入在线教学师生评价的内容。三是评价体系保证数据获取渠道畅通，全面掌握在线教学教师或者学生评价基础数据和交互信息。在线教学的教学交互是教师和学生有效参与教学过程的表征，基于教学交互的在线教学教师和学生的全面评价不是一个独立的、静态的、单向的评价行为，而是教师和学生在互动活动中协同发展的过程。3.强调基于成长过程的发展评价从过程上来说，在线教学是教师为学生提供学术性或非学术性学习支持服务的过程，这是不断发现学生学习过程存在的问题与困难，不断调整教学支持服务，帮助学生不断改进学习，从而达到教学目标的过程。持续改进成为教学质量保障内涵的核心，也成为教学质量保障行动的关键，因此，教师和学生评价应贯穿于教与学的全过程。在线教学教师和学生的评价应是对教师和学生发展全过程的评价。从空间维度上来说，评价要将教师和学生在教学空间中的参与度、完成度等进行数字化信息呈现，实现教和学行为过程的评价结果可视化，以便将评价结果持续用于提升教学质量和学习成效。从时间维度上来说，在不同教学阶段对教师和学生进行评价，一方面要将教师教学情况和学生学习表现以“增值性评价结果”“电子档案”形式呈现，帮助教师和学生了解其教与学发展情况；另一方面要注重及时的教学监测与教学改进等。最终，基于过程的发展性评价强调将教师和学生行为过程形成实时记录，帮助学生自我评价、自我反省、自我成长，帮助教师持续细化教学组织实施、改进教学质量，帮助教学管理人员做出更加科学的教学决策。三、在线教学师生评价的发展路径1.强化数据治理理念创新评价工具，利用人工智能、大数据等现代信息技术，探索开展全过程纵向评价是新时代教育评价的新要求。数据治理成为在线教学教师和学生评价的应有之义。数据治理理念在评价体系构建的过程中有三个阶段。第一阶段是以教师教和学生学的行为数据为核心，对数据进行汇聚、分类、组织、编码、存储、检索等，从而最优化地分析和利用数据，为提升教学效果和教学决策提供及时、准确的数据支撑，即基础的评价数据管理。这一阶段侧重于列表化评价标准，根据评价标准确立评价证据，并获取评价证据，最后建立模型解释评价证据。第二阶段是除了第一阶段评价数据管理外，侧重于组织单位内更大范围的数据治理文化的普及和深入、体制机制的变革与组织行为的转型。这一阶段是要推动组织单位内共享教师评价和学生评价的数据，强化数据的整合利用，发挥数据的潜在价值，为完善学校治理、提升支持服务提供及时、准确、完整的数据支撑，即一定范围内的数据治理。第三阶段则发展为关注跨部门、跨单位、跨区域、跨层级、跨行业等组织单位外更广泛的数据共享和交换，关注如何有效保护单位数据资产、数据机密、个人隐私等的数据安全需求，关注业务协同互联互认，以及认证、授权、管理机制。2.优化体系构建机制以数据治理为抓手，创新评价方式，应充分发挥教学参与者、管理者、监督者的作用，建立“里应外合”双轴驱动的师生评价体系构建机制。从狭义范围来看，“里应外合”是组织单位内从教与学内部主要参与者与外部非主要参与者角度支撑思辨评价体系的构建，也是组织单位从评价体系构建基础和评价体系构建目的角度支撑思辨评价体系的构建。“里应”着重从教与学主要参与者教师和学生视角，也着重从评价标准建设、评价证据确立、评价数据获取、评价模型解释等视角考虑；“外合”着力从教与学的非直接参与者管理者、监督者及其他旁观者视角，也着重从达到教学成效目标、支撑领导决策能力等方面来优化评价体系。从广义范围来看，“里应外合”是组织单位内和组织单位外支撑评价体系的构建。这里“里应”着重在组织单位内持续评估、优化评价体系。“外和”着力于建立健全第三方评估模式，即委托专业评估机构、专业评估团队，对数据分析、评价指标、评价维度进行科学性评估，对评价过程、评价方法和评价效果等进行评估，倒逼优化教师评价和学生评价体系构建，以评价考核的方法倒逼组织单位不断提升学习支持服务质量和教学成效。3.推广评价结果应用基于教师评价和学生评价结果，广泛推动评价结果应用，是评价结果应用和评价体系构建双螺旋提升的重要支撑。一方面，推动评价结果应用不仅是推动直接参与教学的教师和学生提升教学成效，还是逐渐实现教师和学生评价结果跨平台、跨部门、跨单位、跨区域、跨层级、跨体系的信息共享和业务支持，表现出范围更广、程度更深、效果更优的螺旋上升。其中信息共享层面着力于教师和学生评价的结果有条件、有边界、有价值地为其他部门、单位或社会开放的过程，提升信息开放、业务监督水平；业务支持层面着力于教师和学生评价的结果有利于其他部门、单位或社会汇聚缪玲，等：大数据应用背景下在线教学师生评价发展路径探究 67大连教育学院学报数据、整合利用、深入挖掘，实现数据的增值利用，提升学校、机构或社会协同治理水平。另一方面，评价体系构建是基于评价结果的广泛应用，推动获取跨平台、跨部门、跨单位、跨区域、跨层级、跨体系的信息，实现评价数据更全面、评价方法更客观、评价结果更精准的螺旋上升。评价结果更广范围的应用是评价体系科学构建的体现，评价体系更科学构建有赖于评价结果更广范围的应用，二者相互支撑、相互依赖、相互发展。4.制定运行保障制度强化数据治理理念、优化体系构建机制、推广评价结果应用涉及评价证据数据和评价结果数据的采集、共享、应用、存储安全和交换安全等重要领域，均离不开相关制度保障。在教师和学生评价体系发展过程中，制度保障机制主要包括四方面基本要求。一是通过条款，确定教师评价和学生评价证据数据和评价结果数据这一数据资源的权益归属和承担义务。二是积极研究评价结果应用制度和评价结果共享制度等。评价结果数据应用制度更侧重发展与改进教师在教学过程中和学生在学习过程发现问题，是一个跟踪的、持续性改善的过程。评价结果共享制度更侧重于有效支撑跨部门、跨系统协同，有效支撑领导决策和社会服务，有效支撑学校及学习型社会建设的目标。三是教师评价和学生评价体系构建、应用、完善等过程的监管制度，提升数据的使用价值，保障结果的有效，以及对侵犯权益行为的惩戒。四是教师和学生评价所涉及的数据资产的安全、隐私保护的制度。总之，在线教学评价应朝着数据治理、智能智慧等现代信息技术与教学参与者、管理者、监督者、应用者乃至旁观者、社会大众等多种要素深度融合，且共生发展的方向转型。参考文献：1 吴立宝,曹雅楠,曹一鸣.人工智能赋能课堂教学评价改革与技术实现的框架构建J.中国电化教育,2021(5):94-101.2 郑勤华,陈耀华,孙洪涛,等.基于学习分析的在线学习测评建模与应用学习者综合评价参考模型研究J.电化教育研究,2016(9):33-40.3 韩凌,李慧芳.基于大数据的英语“精准教学”及其实现路径J.教学与管理,2020(30):108-111.4 魏亚丽,张亮.从“基于经验”到“数据驱动”：大数据时代的教学新样态J.当代教育科学,2022(2):50-56.5 陈丽.术语“教学交互”的本质及其相关概念的辨析J.中国远程教育,2004(3):12-16+78-79.责任编辑：赵国惠Research on the Development Path of Teacher-student Evaluation in Online Teachingin the Context of Big DataApplicationMIAO Ling,ZHOU Jie（Guangdong Open University,Guangzhou,Guangdong,510091）Abstract:In online teaching,there are still problems of unscientific evaluation concepts,unscientific evalu-ation indexes and unscientific evaluation methods in the process of teacher evaluation and student evaluation.The development of teacher-student evaluation in online teaching should lay emphasis on objective evaluationbased on behavioral data,comprehensive evaluation based on teaching interaction and development evaluationbased on growth process,further intensify the concept of data management,optimize the system constructionmechanism,promote the application of evaluation results and formulate the operation guarantee system.Key words:online teaching;teaching evaluation;data management;process evaluation 68