2023年启明英语口语计算机考试系统综述.doc

启明英语听说计算机考试系统
1.1 概述
英语听说计算机考试系统是一套采用现代化计算机技术辅助实现听说考试的系统。与传统的考生直接面对考官的口语考考试方式不同，代之以考生面对计算机，由计算机向考生显示和播放预先录制好的考试题目，考生在计算机面前回答问题，计算机录制并收集考生的答题录音，而后集中由评判教师统一评分。计算机辅助听说考试系统有以下特点：
Ÿ 大规模考生可以同时进行考试；
Ÿ 考试、评卷分离；
Ÿ 考官发音标准，每个考生听到的声音都是同样的；
Ÿ 考试题型丰富多样。
这套考试系统方案，我们根据听说考试的特点，充足融入了启明电子数年在教育行业积累的经验和先进的技术与理念。
1.2 系统业务模型
1.2.1 英语听说计算机考试的概念
考生信息：用于验证和区分每一个参与考试的考生的信息表。一般涉及考号、姓名、考点、试室等。
试题信息：由试题制作功能模块生成的试题文献包。这是一套完整试题的文献的集合。
开考指令：在所有的考前准备工作完毕后，监考员就可以启动系统的开始考试指令。随后考试系统将在预先设好的时间间隔内，依次播放考题的内容，考生根据提醒录制答案。考生的考试是在统一的指令下完毕的。
数据打包：考试完毕后，以考生为单位打包答案，经加密、压缩后的考生答案传输到服务器端；当本场考试结束后，所有考生的答案压缩包又打包成一个以试室为单位的压缩包，以便于传输或刻录，将来评卷也是以试室为单位。
1.2.2 工作流程
听说考试具有时间短、规模大、数据保密性强的特点，必须严格按操作流程来进行。所有监考的教师，考试前一定要进行适当的培训，以掌握听说考试的操作过程。具体工作流程如下：

监考教师
领卷

考生
设备检测

考生登录系统
监考教师
装入试题；
导入考生信息

异常解决

考生考试

考场数据汇总
上传考试中心

考生
答案上传
到考试服务器

1.2.3 模块结构
模块组成结构如下图所示：

考试服务端（教师用）

考试子系统
考生信息管理

试题管理

考试设立

Ftp/Http服务

考试客户端（考生用）

考生登录

设备检测

考生考试

1.2.4 功能描述
　　考试服务端
l 考生管理：导入考生信息；新增、修改、删除、保存个别考生信息、初始化考生状态信息
l 试题管理：信息认证、试题信息装入
l 考试设立：设立答案汇总目录、控制登录时机、控制考试的开始、结束状态
l FTP/HTTP服务器：为登录到系统的客户机提供FTP/HTTP服务
　　考试客户端
l 考生登录：考生输入自己的考号，登录到考试系统；系统检测是否反复输入或错误输入，若不对的，就拒绝考生登录
l 设备检测：考生登录后，检测所用计算机录、放音设备
l 考生考试：所有考生准备完毕后，监考教师就可以启动开考指令，考试客户端进入考试状态，此时考生只需根据提醒录音，不能进行别的操作。所有的考生所看见的题目是同步进行的，保证考试的公平性。
1.3试题制作
试题制作部分是整个英语口语考试的入口。考试题型的拟定，直接关系到考生平时练习的方式，考生口语水平可以通过这样的考试方式得到真正的提高。因此，良好的试题类型，通过计算机丰富的表现形式，可以达成抱负的考试效果和教学效果。
本系统在通过精心的调研结合已有系统的经验，制作了这套适合各种试题类型的试题制作系统。
一、试题素材多样性
充足运用多媒体技术，在考试题型上有更丰富的选择，试题可以是各种媒体材料综合组成，试题制作过程是要根据各种类型的题材（图片、文字、声音、视频图像、flash动画等），制作出多种类型的口语试题；制作完毕的试题通过加密形式存放；试题既可以存放在本地，也可以通过光盘、磁盘、网络传输。
二、试题题库海量
多种类型试题的组合，又能得到多套试题，从而建立了题库资源。
三、题型多元化
启明“人机对话”系统不仅仅可以实现英语口语考试，还可以进行听力、及用于笔试作答的主观题型——写作、选择题、判断题、改错题等等。换言之，只要条件允许，整个英语考试科目内容可以通过启明“人机对话”系统来实现考试。
1.3.1试题制作流程

1.3.2试题制作部分子模块

1.3.3各子模块的功能：
Ø 题库设立：设立题库存放的位置；
Ø 试题制作：指定试题类型，输入，录制说明信息，配置相关控制项，组织相关媒体信息。
Ø 套题制作：根据已经制作完毕的各种类型试题，进行排列组合，得到套题；
Ø 模拟套题制作：和套题制作类似，但是是专为考生练习用的；
给分板制作：是为以后的评卷制作评分模板（供学校，考生自己练习时评卷用，不合用网上评卷，网上评卷的给分板是由专家在评卷之前给定的）；
1.4评卷部分
参照过去人工评卷的方法，我们将系统按照三个阶段来评卷,并且在计算机系统的控制下，过去许多好的评卷思想由于客观条件无法实现或不能很好的实现，现在可以得到充足运用，不仅能提高评卷质量，更能促进和考察评卷员评卷质量：
试评阶段：将随机抽取的试评试卷分发给评卷员评卷，重要是统一评卷员对评分标准的掌握尺度。试评试卷来自于考生的正常答卷，对它的评卷不影响考生的最终成绩。
正评阶段：重要将考生试卷随机地分发给评卷员评卷，系统通过误差控制，产生考生的最终成绩。在这个阶段，评卷员的评卷状态分为三个：学习状态、测试状态、评卷状态。在学习状态，评卷员得到的是学生试卷，为的是让评卷员精确掌握标准；在测试状态，评卷员得到是测试试卷，通过这种试卷，衡量评卷员掌握评分标准的情况。在评卷状态，就是真正产生考生成绩的正式评阅状态了。
重评阶段：对评卷结果进行最终确认。例如零分试卷和满分试卷的确认。需要说明的是这些试卷不通过误差控制，评卷结果就是考生的最终成绩，所以建议选取比较稳定的评卷员来评卷。
为了最佳的控制阅卷的质量，在正评阶段对评卷员个人又提成三个阶段：学习阶段、测试阶段、评卷阶段。在学习阶段和测试阶段使用的试卷是严格挑选的。通过学习阶段的评卷使评卷员进一步掌握评分标准；通过测试阶段的评卷检查评卷员对评分标准的掌握情况，来决定评卷员是否可以进入评卷阶段。
1.4.1评卷流程图如下：
开始
分派评卷教师
评卷阶段
重评阶段
结束
测试阶段
学习阶段
试评阶段

正
评
阶
段

1.4.2重要业务流程
评卷
用户认证，登陆系统
根据用户的评卷题目，系统自动调度一份试卷，同定义的给分板组合成html页面
用户根据评分标准和试卷情况，作出判断
正常试卷，给出分数，提交
评分标准难以把握的试卷，提交组长解决。
对于质量不好的试卷，撤回后台解决
下一份试卷

对于普通评卷员，重要任务是进行评卷，对他们的规定较低。登陆系统后，系统根据他的评卷定义，自动调度一份试卷给他，评卷员给出相应的分数后，系统自动调度下一份试卷。
实时记录和人工抽查
组长登陆系统
查看评卷员某时间段的实时记录情况，涉及平均分、标准差、给分分布、工作量等。

假如误差超过一定范围，可以取出该评卷员的已评试卷
对于该评卷员的试卷，组长重新更改给分，也可发回给评卷员重评，或手工调度给固定的人员评卷。
对于评卷误差经常超过的评卷员，可以停止其评卷工作。

实时记录和人工抽查试卷是评卷过程中重要的人工评卷误差控制方法，一般是由各级组长来完毕。组长登陆系统后，自动进入到实时记录界面，结合平均分、标准差、给分分布、工作量等曲线，可以实时监控到每位评卷员的当前工作状态，对于不稳定的情况及时进行调整。
误差控制原理
误差控制模型
试题分类：
根据实际情况分为两大类：无误差控制试题和有误差控制试题。
有误差控制试题指试题的分值大、答案多样、评卷的人为误差比较大，例如作文题。这些试题需通过几个评卷员（一般情况下最多有4个评卷员）的评分，系统根据误差控制理论，产生考生的最终成绩。
无误差控制试题指试题的分值小、答案比较拟定、阅卷的人为误差比较小，例如填空题。这些试题系统只需要一个评卷员进行评分就给出考生的最终成绩。
误差控制模型：误差控制模型工作方式为：一方面将试卷分发给评卷员1和评卷员2进行评卷得到分数为X1和X2，系统比较X1和X2，假如在允许的误差范围内产生考生的最终成绩；否则将试卷分发给评卷员3得到分数X3，系统检测X1、X2、X3中误差最小的两个分数，假如在允许的误差范围内产生考生的最终成绩；否则将试卷分发给组长做最终评卷。
一致性控制
在评卷过程中，虽然通过误差控制有效的克制了考生成绩的评判误差，但是所有评卷员在评卷中对标准掌握的是否一致和每个评卷员在评卷过程中对标准的掌握是否一致均影响着评卷的质量、速度和考生的成绩。系统通过以下两个控制来进一步克制误差、提高阅卷的整体质量、效率。
随机任务分发
系统对任务分发是“随机的”。在阅卷中假如将一个地区的考生试卷分发给几个评卷员评卷，从而导致区域性评卷误差。系统将每份试卷随机地分发给评卷员评卷，使评卷员无法对不同的区域的考生采用不同的评分标准，从而解决区域性误差。
1.5 界面设计
1.5.1 在客户端，界面设计遵循以下原则：
Ÿ 尽量减少考生的操作，除了登录，设备检测外，原则上不再有别的对计算机的操作。；
Ÿ 界面的提醒信息尽量丰富，明了，突出。
Ÿ 所有考生的考试过程是同步的。
具体设计方面：
Ÿ 考试界面应涉及以下提醒的内容：
考号，姓名，照片；试题信息列表（题目类型，考试时间）；操作提醒信息（当前状态，进度条，题目提醒信息）。
1.5.2 在服务端，界面设计遵循以下原则：
Ÿ 操作尽量简朴；
Ÿ 为监考老师提供丰富的监控信息，足够的控制功能
具体设计方面：
Ÿ 考试服务端界面应涉及以下的内容：
考生信息导入；涉及考生的考号，姓名，座位号等；并相应显示或控制考生的状态信息,涉及登录状态，答案上传状态等。
试题信息导入；监考教师使用授权数据和口令等装入试题。
过程控制：允许、限制登录，开始、结束考试的控制按钮。
1.6 应用环境
1.6.1硬件环境规定：
服务器：每个考场一台高性能的PC机或者专用服务器
PC机：
　　　　CPU:P4 2.0同等级或以上
　　　　RAM:1G以上
　　　　网卡:100Mbps
　　　　硬盘:不低于80G
　　　　CDROM等等
专用服务器：
CPU: CPU Intel® Xeon™2.0或以上
　　　　RAM:2G以上
　　　　网卡:100Mbps
　　　　硬盘:不低于160G
　　　　DVDROM等等

客户端：多台个人计算机，要有一定的冗余量（建议不低于5％）
　　　　CPU:赛扬1GHZ以上
　　　　RAM:256M以上
网卡100Mbps
　　　　显卡：可支持800X600的真彩显示模式
　　　　声卡
网络： 100M局域网，采用TCP/IP通讯协议
1.6.2软件环境规定
服务器：Windows2023/Windows2023操作系统
客户端：WindowsVISTA/WindowsXP/Windows2023/Windows98操作系统，显示模式设立为800X600或1024X768真彩模式，安装Internet Explorer6.0或以上版本浏览器
1.7 系统特点总结
Ÿ 安全性
系统在各部分都采用的数字加密和数字署名技术，严格控制试题和考生答案的机密性和完整性。通过试题制作得到的试题采用加密和数字署名。正式考试前监考教师获得所需的授权密钥，通过授权密钥才干打开并安装考试题目。考生的答案通过加密署名的方式上传到考试服务器。考试服务器汇总后也进行加密和署名再通过网络或人工方式进行数据集中，进入评卷系统。
Ÿ 灵活性
系统支持多种试题类型，可以灵活组合，适应各种类型的英语听说考试。
Ÿ 易用性
系统在考试和评卷中采用B/S结构，可以适应于各种网络环境。只要会使用浏览器就可以使用，对考生和评卷教师不需要过高的计算机使用知识。同时减少了系统的维护量。B/S的工作模式，对客户机的规定非常低，登录系统的模式灵活，可以是本地局域网，也可以是远程的Internet网；数据集中式的管理，最大限度的减少了系统的风险性，减少了维护人员维护。