1、具体方案2项目组成3技术关键和系统优势4重要技术参数7成功案例8全通网上系统详细介绍10(一)系统组成结构10(二)系统技术优势10(三)扫描识别子系统介绍11(四)网上评卷子系统13(五)统计分析子系统18(六)系统功能概述20(七)系统主要作用21(八)应用效益分析22(九)系统实施环境22网上阅卷系统建设方案网上阅卷系统建设方案目 录具体方案1。系统配置A.软件系统配置网上阅卷系统(包含扫描识别软件、网上阅卷服务器平台软件、网上阅卷客户端软件);用户许可:并发用户数为30300并发用户数是指同时在网上阅卷的评卷人数,实际可以使用系统的人数则没有限制(即全区教师均可拥有合法的用户帐号及密码
2、,并在不超过系统用户人数的前提下随时使用系统).B.硬件设备配置高速文挡扫描仪:设备型号:高速扫描仪1台主要参数:每分钟60110页,可同时双面扫描。2。网络架构(1) 信息中心部分网络结构n 数据中心为一台专业服务器,设立在信息中心内部;n 试卷的扫描工作可统一在数据中心所在的地点完成,也可在下面各阅卷点完成;n 数据中心分发给各阅卷点的待评数据,直接通过网络完成传送,返回的得分、批注等数据,也由网络直接传回。(2) 学校部分网络结构学校部分网络没有过多要求,只要各客户端能够使用IE,并能访问到信息中心阅卷服务器的IIS服务器即可。项目组成项目名称描述单位数量软件系统软件部分全通网上阅卷系统
3、阅卷平台阅卷系统主平台套1扫描识别系统对扫描得到的图像进行识别,每台扫描仪对应一套扫描识别软件套1全通网上阅卷系统用户数用户数指系统能够支持的同时在线阅卷的教师人数个30300配套设备部分高速扫描仪每分钟60110页,可同时双面扫描台1技术关键和系统优势1. 扫描识别部分技术关键与系统优势实现主客观题一体化网上阅卷的技术关键在于识别算法。不同的扫描识别算法识别的机理不同,因而对答题卡的设计、印制上有着各自特殊的要求。例如,有的要求有时标(同步头)、检测线/检测点等定位方式,也有的需要在答题卡模板中加入特殊标记,以便于算法的识别.还有的算法自己提供答题卡设计工具,将答题卡的设计过程信息、定位信息
4、、区域信息等进行格式化,作为识别算法快速准确识别的依据.这样,就产生了对答题卡的设计、印制等过程有着各自不同的要求.如果识别算法对答题卡的设计要求很高,用户就无法自己设计答题卡;如果算法对印刷工艺要求很高,用户也只能找专业的精密印刷企业去印刷,答题卡的设计、印制就会成本很高。另外,算法识别的速度、精度等也影响了识别算法在网上阅卷系统中的应用。如果要想把网上阅卷系统引入学校,就必须要让识别算能够识别普通复印纸上印刷的黑白上的涂点信息,同时对印刷工艺的要求不能太高。全通网上阅卷系统的扫描识别算法是目前诸多识别算法中能识别普通印刷工艺印制的普通纸上涂点的算法之一,可以用办公类软件设计答题卡,把设计答
5、题卡的自主权交给了学校自己。全通网上阅卷系统可以做到采用普通文档扫描仪、用户可以采用普通复印纸自己设计印制答题卡,极大地降低了网上阅卷系统的建设成本和连续使用成本,使得过去高贵的、只能用在高考等大规模考试的网上阅卷系统真正地走向了平民化,能被学校所接受.2. 主观题阅卷部分技术关键与系统优势1) 系统需要在各种网络环境下运行,包括局域网和互联网全通网上阅卷系统采用B/S结构,可以在城域网甚至互联网运行,并且无需安装客户端软件。2) 数据文件大小必须满足数据存档和互联网运用的要求全通网上阅卷系统独有图片压缩技术,在不影响图片质量的情况下压缩图像文件的大小,200DPI下A3双面文件大小不超过30
6、0K,方便存档,并且大大降低对阅卷网络环境的需求3) 面向日常考试,接轨中高考全通网上阅卷系统以“面向日常考试”为定位,适合学校和区县教育局使用.利用全通网上阅卷系统将高(中)考网上阅卷模式带入日常考试中,可以使学生避免因怯场或不适应而导致的非知识性失分,达到发挥学生应有的水平,增强竞争能力之目的。3. 统计分析部分技术关键与系统优势1) 支持多层次、全方位的统计监测全通网上阅卷系统既支持学生、班级、年级、教师、学校乃至试题、知识点为统计与跟踪对象,也支持各科目总分、排名及分数、名次分布、难度、区分度、信度等测量指标的统计与跟踪管理,所有统计标准完全以教育测量学为依据.同时,还可根据实际需要,
7、实现对特定目标的成绩变化统计与跟踪分析,包括对各类学业背景的调查分析,如文理分科、政治面貌、所在学区等等。2) 支持学生班级、年级变化后的统计与连续跟踪不论在校学生的班级、年级、学号、考号如何变化,只要及时在全通网上阅卷系统上修改学生管理信息,即可实现在学生考试成绩的统计与连续跟踪管理.3) 支持灵活、多样的数据录出方式全通网上阅卷系统既支持。xls、。dbf、。txt等多种格式的成绩数据文件导出,还支持接口直接导出,同时支持。mht、。pdf等格式的报表导出。4) 支持带批注试卷的管理、检索与浏览全通网上阅卷系统支持各种带批注试卷的管理、检索与浏览,可以将批注试卷导入并统一管理,弥补了网上阅
8、卷原卷不留痕迹的缺点,将结果更好的反馈于教学之中。4. 品牌优势全通网上阅卷系统在全国共有600家以上的成功案例,在苏州地区也有苏州市教育科学研究院、张家港市教育局、常熟市教育局、太仓市教育局、昆山市教育局、相城区等签约客户,并且受到客户的一致好评。系统软件部分使用全通网上阅卷系统,首先,不管采取任何公司、任何来源的网上阅卷答题卡,均无需另外设计、印制答题卡,如果交叉使用服务器时也不必另行安装客户端,节省大量开支,并且避免了由于兼容性带来的种种问题;其次,全通网上阅卷系统良好的稳定性和准确性,保证阅卷的顺利完成;全通网上阅卷系统服务支持团队一如既往的高质量服务也能为吴中区网上阅卷项目的顺利实施
9、提供强有力的保障。重要技术参数1全通网上阅卷系统支持常用文字编辑软件(如MSWord)完成答卷设计,答题卡模板设计无须进行代码编程,使用界面友好、方便;2全通网上阅卷系统所有通用扫描仪可以通过的纸张,包括60克以下纸张,以复印、速印或胶印方式双面印制答卷3全通网上阅卷系统支持A4、A3及不规则尺寸的答卷扫描识,且扫描速度支持A4/A3纸张在200DPI下单/双面不低于2000张/每小时;具备扫描信息的校对处理,对印刷异常、答卷信息异常、扫描工作中断电或数据线中断等异常现象有相关的处理方式,支持扫描数据的拼合等扫描管理功能.4全通网上阅卷系统支持A、B卷的答题卡及常用条形码考生考号的自动识别,同
10、时支持题卡合一和题卡分离的模式;支持对阅卷的总体进度、各题进度、个人进度及评卷误差的实时监控;支持多个科目同时评卷;任意题目,按任意比例进行单评、双评或多评设置,并具有评卷仲裁及一致性检查功能;5全通网上阅卷系统支持数据处理,具备数据导入/导出功能,能够与“嘉定教育基础数据平台”成绩管理系统接口兼容.支持对个人、班级、年级、学校历次考试成绩的跟踪管理,包括对科目、总分、排名、成绩分布、名次分布及各项测量结果的跟踪管理;支持原始分、标准分、平均分、排名、选择率、正确率、最高分、最低分、闪光点、薄弱点、标准差、区分度、贡献值、难度、信度、Z分数、分数百分等级、分数分布、名次分布等统计指标的自由选择
11、;6全通网上阅卷系统支持在局域网、广域网和互联网上进行阅卷;7全通网上阅卷系统答卷设计无需增加固定的定位点、定位线或同步头,具有良好的兼容性,可简单方便地定义和读取其它网上阅卷系统的答卷,可支持联考8全通网上阅卷系统答卷扫描与考生考号、客观题涂点识别同步完成,无须进行二次识别操作;9全通网上阅卷系统支持试卷印刷异常的特殊情况处理功能,确保在出现例如:试卷页码漏印、试卷印刷倾斜、客观题涂点印刷不完整、试卷有小幅褶皱等情况下的正常扫描识别功能;10全通网上阅卷系统支持单选、多选的主观题和客观题任意混排,不限制客观题答案选项的数量以及不限制答案的组合方式,同时支持客观题的题目和涂点混排;11全通网上
12、阅卷系统支持支持A4、A3及不规则尺寸的答卷扫描识,且A3答题卡在200dpi分辨率下,其双面扫描的影象文件容量不大于250K,扫描图像清晰、不失真、不变形;12全通网上阅卷系统支持支持主客观题部分的选做题评卷及数据处理功能,即系统可以自动识别选做的标识并进行处理;13全通网上阅卷系统支持支持多页答题卡且当单科答卷多于一页时,无需在每页答卷上重复填涂考号的功能;成功案例华东地区江苏省启东市教育局 江苏省海门市教育局 江苏省如东县教育局 苏州市相城区教育局苏州市吴中区教育局 江苏张家港市教育局 江苏省昆山市教育局 江苏省吴江市教育局江苏省常熟市教育局 江苏省太仓市教育局 江苏省宜兴市教育局 江苏
13、省铜山市教育局上海市静安区教育局 上海市黄浦区教育局 上海市闸北区教育局 上海市崇明县教育局杭州市拱墅区教育局 浙江省吉安县教育局 江苏省如皋市教育局 江苏省海安县教育局江苏省仪征市教育局 扬州市邗江区教育局 山东省乳山市教育局 安徽省涡阳县教育局安徽省利辛县教育局 安徽省蒙城县教育局 上海华东模范中学 上海市七一中学 上海市第四中学 上海市浦光中学 福州市第一中学福建省平潭一中 杭州市学军中学 宁波市慈溪中学 金华市第一中学 江西省上高二中江西省临川一中 江西省南城一中 山东省郓城一中 青岛市崂山一中 烟台开发区高中山东省乳山一中 山东省乳山六中 乳山市金岭中学 华中、华南地区广州市教育局教
14、研室 广州市越秀区教育局 广州市番禺区教育局 广州市白云区教育局广州市荔湾区教育局 广州市花都区教育局 广州市黄埔区教育局 广州市萝岗区教育局广州市南沙区教育局 广州市从化区教育局 广州市增城区教育局 广东省中山市教育局广东省珠海市教育局 广东省东莞市教育局 深圳市宝安区教育局 深圳市龙岗区教育局深圳市福田区教育局 佛山市高明区教育局 惠州市教育局教研室 梅州市五华县教育局湖南省怀化市教育局 娄底市娄星区教育局 湖北省荆门市教育局 广州市第一中学 广州市第二中学 广州市第三中学 广州市第四中学 广州市第六中学广州市第七中学 广州市第十中学 广州市第13中学 广州市第16中学 广州市第17中学广
15、州市第21中学 广州市第65中学 广州市第71中学 广州市第78中学 广州市第80中学 广州市第83中学 广州市第91中学 广州市109中学 广州市育才中学 广州市协和中学广东省仲元中学 广州市培正中学 广州八一实验学校 广州市东环中学 广州市恒福中学广州市广铁一中 广州市知用中学 广州市南沙中学 广州市玉岩中学 广州市白云中学 广州市真光中学 广州市南海中学 西关外国语学校 花都区秀全中学 花都邝维煜中学 番禺区象贤中学 番禺区禺山高中 番禺区石基三中 番禺区星海中学 番禺区东风中学 番禺区象俊中学 番禺区市桥中学 番禺区市桥二中 番禺区侨联中学 番禺区桥城中学 番禺区大石四中 番禺区大岗中
16、学 番禺区钟村中学 番禺区桥兴中学 深圳市深圳中学 深圳市实验中学 深圳大学附属中学 深圳市翠园中学 罗湖外国语学校深圳市高级中学 深圳外国语学校 深圳市梅林中学 深圳市福田中学 深圳市益田中学深圳市宝安中学 深圳宝安高级中学 深圳市新安中学 深圳市西乡中学 深圳市沙井中学深圳市海滨中学 深圳市龙华中学 深圳市新华中学 深圳市观澜中学 深圳市观澜二中深圳市松岗中学 深圳市文汇中学 深圳宝安实验学校 深圳市海湾中学 深圳市福永中学深圳市民治中学 深圳市光明中学 深圳光明高级中学 深圳市公明中学 深圳布吉高级中学 深圳龙城高级中学 深圳坪山高级中学 深圳市平冈中学 深圳龙城初级中学 深圳龙岗实验学
17、校深圳市福安中学 深圳沙头角中学 深圳盐田外语学校 东莞市东莞中学 东莞市高级中学 东莞市第一中学 东莞市虎门中学 东莞市实验中学 东莞东华高级中学 东莞东华初级中学 东莞市厚街中学 东莞市玉兰中学 东莞市常平中学东莞市万江中学 东莞市黄江中学 东莞市济川中学 东莞市第四中学 东莞松山湖学校珠海市第一中学 珠海市第二中学 珠海市第三中学 珠海市实验中学 珠海市斗门一中中山市纪念中学 中山市第一中学 中山市华侨中学 中山实验高级中学 佛山市第一中学 佛山市第三中学 佛山市黄歧高中 佛山市均安中学 江门培英高级中学 江门市鹤华中学雷州市第一中学 梅州市水寨中学 梅州市蕉岭中学 兴宁田家炳中学 五华
18、田家炳中学梅州市五华中学 梅州市安流中学 汕头龙湖实验学校 长沙市长郡中学 长沙市第一中学 长沙麓山国际学校 长沙市明德中学 湖南省浏阳一中湖南省宁乡一中 湖南省澧县一中 湖南省石门一中 湖南省桃江一中 湖南省沅江一中湘潭市湘钢一中 湖南湘潭县一中 湖南岳阳县一中 湖南省娄底一中 湖南花垣边城高中株洲市九方中学 湖北省枝江一中 湖北省宜都一中 洛阳市第一高中 华北、东北地区北京市崇文区教育局 天津市耀华中学 河北临城实验中学 黑龙江省实验中学 哈尔滨师大附中 哈尔滨兆麟中学哈尔滨第三中学 哈尔滨第一中学 哈尔滨第六中学 哈尔滨第九中学 哈尔滨第24中学大庆市铁人中学 黑河北安第一高中 黑龙江安
19、达中学 黑龙江绥化一中 西南、西北地区广西区南宁市教育局 广西区柳州市教育局 昆明市五华区教育局 昆明市西山区教育局昆明市盘龙区教育局 重庆市第八中学 重庆市巴蜀中学 重庆市巴县中学 重庆市长寿中学 重庆市合川中学重庆市江津中学 重庆市铜梁中学 重庆市綦江中学 广西南宁市二中 广西南宁市三中广西区柳州高中 柳州市铁路一中 广西区百色中学 广西区钦州一中 广西区钦州二中广西区玉林高中 广西区玉林一中 广西区贵港一中 广西区贺州高中 桂林市十八中学 云南省民族中学 昆明市第一中学 昆明市官渡二中 昆明市铁路三中 贵阳市第一中学贵州省清华中学 贵阳市远洋中学 截止2010年,全国已有1000多个教育
20、局及学校的用户案例,且在快速发展中全通网上系统详细介绍(一) 系统组成结构全通采用模块化结构设计,分别由扫描识别子系统、网上阅卷子系统和统计分析子系统三大部分构成。扫描识别子系统统计分析子系统网上阅卷子系统全通网上阅卷系统全通三大部(系统)的主要功能:1、扫描识别子系统实现客观题部分的自动识别与判卷;完成考生答卷的电子化,并将电子化答卷以图片格式保存在服务器。其中,客观题电子答卷可供答题与识别结果校对使用,主观题电子答卷供网上评卷使用.2、网上评卷子系统评卷教师以系统授予的合法身份及权限进行网上评卷,并以各种科学的方法确保网上评卷质量与效率.3、统计分析子系统以教育测量学指标体系为依据,并结合
21、实际需要设置统计分析指标,自动生成各类统计分析报表。(二) 系统技术优势网上评卷是一个对技术要求和经验要求很高的系统工程,涉及到从组织考试、题卡印制、题卡分发回收到数据处理、评分统计等众多环节、任何一个环节出现问题都可能导致重大问题。技术要求重点表现为对识别的高精准度、扫描处理速度和数据校对的快捷性,对经验要求则除了考务方面外,应用系统必须保证识别数据与图像的一致性,能捕捉到所有考生扫描数据的错误并能得到正确校验,实现误差控制的有效性和评分质量的有效监控.全通网上阅卷系统具有以下独特的技术优势可以确保其应用在各类考试中:1、精确识别网上阅卷OMR识别率至少要达到目前光标阅读机的水平,我们自主研
22、发的多重图像处理识别技术完全满足这一要求甚至更好;2、全实时扫描我们的系统采用了全实时扫描技术,每张答题卡扫描过后,即完成了全部识别任务,包括OMR识别、条形码识别、图像压缩存储以及考生号的判别和错误标志记录,并且并不影响扫描速度;3、自主设计印刷答题卡我们采用的识别技术完全消除了对答题卡严格的设计要求,对纸张、印刷及裁切也基本没有要求,支持手工设计答题卡,也可以利用系统附带工具迅速生成答题卡.4、有效的评分监控手段评卷系统具有个体与全体一致性实时校验、个体前后一致性校验,最大程度避免了评卷员评分前紧后松、评分尺度不稳定等现象。5、产品化概念全通各个子系统均采用产品化概念开发而成,可以最大程度
23、的减少人工干预,避免人为操作或计算失误,保证了各个环节数据的一致性和正确性。(三) 扫描识别子系统介绍1 概述全通的扫描识别子系统是集OMR、条形码和图像识别功能于一体的专业扫描识别系统,支持60克以上普通纸制作答卷,且以“无需定位、模糊识别”的技术完成答卷的扫描识别工作。这对教育局和学校而言,比使用严格定位技术进行识别设计的产品具有无法比拟的优势。因为它有效地避免了因使用普通纸和以复印、速印、胶印等简单方式制作答卷容易出现偏移而可能导致的识别错误的现象发生,大大提高系统的容错能力。全通扫描识别系统的应用将大幅降考试成本,提高阅卷的效率。系统灵活的答卷及模板设计功能,不但接轨了高考、中考计算机
24、网上阅卷模式,而且增加了阅卷的灵活性,并将对提高考试的阅卷效率与质量产生积极的作用。2 功能描述功能流程:使用MS Word或其它的字处理软件制作答题卡;使用全通模版编辑器制作答题卡的扫描识别模版:扫描一份空白的答题卡,在扫描的图像中定义OMR、条码以及图像字段,并根据实际情况创建多页模板,添加模板标识(ID);使用全通对回收的试卷进行扫描识别.首先根据自身需求进行系统设置,然后打开对应的题卡模板文件,开始扫描;扫描过程中系统自动记录每份答题卡的扫描顺序、多页题卡的顺序、识别并判别考号的正确性、识别客观题并记录每个涂点的状态;全部题卡扫描完毕,对数据进行数据校验(或与扫描同时进行),将扫描数据
25、导入到阅卷系统中。3 图像识别技术(1) 条形码识别(BCR)BCR(Barcode Recognition,条形码识别),此为识别事先打印(或印刷)生成的规范标准的条形码信息.目前通用流行的为128、39等几种码制,特点为快速、准确,现在以不干胶条的形式大量用于考生的ID号码如报名号、准考证号的识别应用上,对于提升自动处理的效率有着特殊的关键作用.在大规模关键性考试中,答题卡的准考证往往采用条形码,而不采用OMR,不仅大大提高考号的识别率,而且基本消除了考号交叉错误的情况。全通支持大多数流行的条形码制的识别,并且具有识别率高、对破损和倾斜条码的容错能力强,全通同样采用实时识别。(2) OMR
26、识别技术此项技术在客观题的机器评卷中已大量采用,采用信息卡上固定的标志位置是否经过人工涂写作为识别的依据。特点为高速、准确可靠,是十分适合考试信息处理尤其是选择性的客观题阅卷的技术手段。OMR识别技术过去主要运用在光标阅读机上,尽管具有速度快、识别准确的优点,但对答题卡的制作、印刷要求太高,并且不能扫描图像,无法运用在网上阅卷中,所以逐步出现了OMR技术,扫描设备采用专用扫描仪和通用扫描仪,解决了光标阅读机无法采集图像的问题,但专用扫描仪同样对答题卡的要求太高,且设备价格高,操作难度大的缺点,而通用扫描仪由于价格低、易使用、成像质量高等优点,成为实现OMR识别的理想设备。基于通用扫描仪的OMR
27、识别技术是全通的一大亮点,采用“无需定位、模糊识别”的技术实现了和传统光标阅读机同样的识别精度,并且完全避免了光标阅读机的缺陷:同样的高精度实时识别不仅可以采集图像,而且消除了对答题卡的制作、印刷精度和质量要求,不仅可以扫描识别传统的双色答题卡,更设计为对单色黑白答题卡,而且纸张和印刷质量对识别精度的影响微乎其微,这意味着考试组织者可以自主设计印刷题卡、解决保密和题卡高成本的问题。全通的OMR识别技术可以概括为: 对单选题和多选题的准确识别 题卡可自主设计印刷,对题卡的容错性和适应性强,支持黑白和彩色题卡,无 需同步头和检测线; 可使用普通复印纸(60克以上),可胶印、速印、复印; 可识别多页
28、答题卡; 客观题与主观题可随意混排; 可使用不同大小不同形状的客观题填涂点。(3) KFI技术在网上评卷扫描系统中,数据校验的重点是考号校验和页码校验(多页答题卡的情况),全通的扫描结果数据全部经过四个方面的正确性校验:页码的正确性校验: 考号的填涂错误或条码损坏校验 基于考场号的考号的一致性校验 客观题填涂校验在任何考试题卡处理中,前三项必须经过校验无误的试卷才可以进行评分.全通提供了实时和事后准实时处理的KFI(Key From Image)技术,即基于屏幕图象的键盘录入,可以根据图像快速修改由于填涂不当或答题卡等问题造成的错误,全通可以在扫描过程中、扫描后或与扫描并行,通过扫描的图像对每
29、个状态有问题的数据采集点的识别结果进行改正。当然并不是所有能采集图像的扫描识别系统都可以实现KFI,而全通正是由于其先进的识别技术使得全通在扫描过程中记录了大量图像识别信息,才能提供与识别结果对应的精确的图像区域,并自动突出显示给数据校对操作者,这会大大提高校对的效率和准确性。(四) 网上评卷子系统1 概述在中学考试中,一般包括两部分内容:客观题和主观题。在过去我们已经用OMR阅卷机成功解决了客观题,将人为的阅卷误差降到为零。但是主观题的阅卷一直应用传统手工阅卷方式,同时由于主观题的答案的“不确定性”,在阅卷中容易造成不同的评卷员对标准答案掌握的尺度也不一致.网上阅卷系统的目的就是解决整个阅卷
30、系统中的所有“不一致”因素,我们通过高速扫描系统使考生的试卷电子化,然后通过计算机网络阅卷,运用一卷多评、误差控制等手段,使所有评卷员的评分标准趋于一致,以达到“公平、公正”的目的。2 系统功能考试结束并将考生答卷扫描到服务器后,评卷用户即可通过系统设置的帐号和密码登录网上评卷系统,对系统授权的合法用户,系统将按照授权列出用户可选择评阅的科目及题目,评卷用户选择完成后,系统即可通过网络自动随机分发评卷用户授权评阅的题目。此时,评卷用户即可通过电脑浏览器进行答卷的评阅和批注.当评用户评完一份答卷后,系统会自动分发下一份答卷,直至全部答卷评阅完成。 在整个评卷过程中,为确保评卷结果的客观、公正及准
31、确,系统提供了客观公正性保证、误差控制机制、进度质量监控及丰富的辅助功能 根据扫描系统所识别的答案自动计算客观题得分 浏览主观题答题图像,在计算机中直接评分并保存分数 支持整幅图像和分割图像的主观题评分 批注功能 试卷结构分为题组/试题/小题三级,以题组级别评分 实现试评、正评两个评卷阶段 多角色管理策略,分为系统管理员、科目组长、题组组长、评卷员等,支持自定义角色 实现双评、三评主观题评分误差控制方法 利用分数柯斯分布一致性校验、个人复评一致性方法以及抽查方式监控每位教师评分质量 参考试卷(Anchor Paper)应用 自定义不同类型的试卷标志及处理方法(如图像异常、优秀试卷等) 无限数量
32、返回重评 考生信息保密 评卷信息查询打印3 业务模型(1) 评卷的阶段参照过去人工评卷的方法,我们将系统按照三个阶段来评卷,并且在计算机系统的控制下,过去很多好的评卷思想由于客户条件无法实现或者不能很好的实现,现在可以得到充分利用,不仅能够提高评卷质量,更能够促进和考察评卷员的评卷质量.试评阶段:将部分或全部试卷分发给评卷员评卷,主要是同一评卷员对评分标准的掌握尺度。试评试卷来自于考生的正常答卷,对其评卷不影响考生的最终成绩。正评阶段:由系统将考生试卷随机地分发给评卷员,系统经过误差控制,产生考生的最终成绩。检查阶段:由评卷组长随机对某试题或某评卷员的评分结果进行检查。考察各教师的评分稳定性。
33、该阶段实际上是与正评阶段同时进行的。评卷流程图如下:误差控制数据入库处理系统设置评卷任务提取生成考生密号评卷员评卷结果输出统计分析(2) 评阅的试卷类型试评试卷:试评试卷是试评阶段评阅的试卷;从考生的实际答卷中抽取;帮助评卷员理解、掌握评分标准.标准试卷:由组长指定的比较典型的分值非常清晰的试卷;供评卷员在评卷阶段参考,也叫参考试卷;帮助评卷员再次掌握评分标准。正评试卷:考生正常的考试试卷;在评卷员的评卷阶段使用;由系统自动随机分发.(3) 误差控制根据实际情况,在误差控制模型中,试题分为两大类:无误差控制试题和有误差控制试题.有误差控制试题:试题的分值比较大、答案多样、评卷的人为误差比较大,
34、例如作文题.这些试题需要经过几个评卷人(一般情况下最多有4个评卷人)的评分,系统根据误差控制理论,产生考生的最终成绩。.无误差控制试题:试题的分值小、答案比较确定、评卷的人为误差比较小,例如填空题。这些试题系统只需要一个评卷员进行评分就给出考生的最终成绩.随机的分发任务评卷员1评卷得分X1评卷员2评卷得分X2|X1-X2|=误差范围得考生成绩(X1+X2)/2随机分发给第三人将试卷分给组长评卷员3评卷得分X3组长最终评卷得分X4Min(|X1-X2|,|X1-X3|,|X2-X3|)=误差范围假设差距最小的为X2,X3,则得考生的成绩(X2+X3)/2得考生的成绩X4结束否是是否上图为三评误差
35、控制模型。其设计原理为:对设置了三评的答卷/答题,系统首先随机将答卷分发给两个评卷教师,这两个评卷教师评阅完成后得出X1,X2两个评分,此时系统将对【X1X2】的绝对值进行比较,如其绝对值小于容许的误差值,则系统将自动取X1,X2的平均值作为该考生的得分;如超出容许的误差值,系统将把该考生的答卷自动分发给第三人评卷人。第三评卷评阅完成后,得到X3的评分,此时系统对三人评分值的两两之差进行比较,如果它们的差值在容许误差范围内,则系统将取三位评卷人员的评分中,差值最小的两个评分的平均值作为该考生的得分,否则系统将该考生的答卷转发评卷组长进行终评。(4) 质量控制在评卷过程中,虽然通过误差控制可以有
36、效地抑制了考生成绩的评判误差,但是所有评卷员在评卷中对标准掌握得是否一致,每一个评卷员在评卷过程中对标准的掌握是否一致,均影响着评卷的质量、速度和考生的成绩。系统通过以下两个控制来进一步抑制误差、提高阅卷的整体质量、效率。I 评卷员之间一致性控制控制每个评卷员之间的一致性。使用的数学模型为柯斯检验法。简述如下:首先计算出整体评卷的分数人数比曲线,再计算评卷员个人的个人分数人数比曲线;这时比较两个曲线的拟合程度,如果超过设置的允许值,则认为评卷有误差,否则就没有误差。示意图如下:II 评卷员个人一致性控制个人一致性控制主要通过个人复评试卷来检验评卷员在评卷中的稳定性。系统每隔一段时间(可以定时,
37、可以随机,随机时要保证一定间隔)自动在评卷员已评试卷中抽取一定数量的个人复评试卷分发给评卷员进行评卷.个人复评主要是检查评卷员在不同的时间对同一份试卷评判是否一致,并将比较结果写入统计结果库,以此来检查评卷老师在评卷过程中的“稳定性”.其中个人复评的结果分数不作为有效评分。(5)系统流程定义项目定义科目导入扫描数据管理试卷定义主观题定义客观题评卷过程管理科目评卷数据科目试卷数据用户信息客户端导出成绩开始结束管理员登录科目科目信息登录创建科目数据库创建评卷数据用户分配评分系统管理流程图:评卷过程数据流程图:连接服务器评阅试卷写入结果用户信息开始结束服务器端帐户登录科目科目评卷数据取下一份试题科目
38、信息服务器控制数据流程图:客户端评卷控制台用户登录与注销控制命令扫描客户端客户端是否挂起恢复用户状态回收挂起试题定时触发器否是发送控制命令发送测试消息应答消息发送请求消息发送接受消息(五) 统计分析子系统1 概述在完成网上评卷后,我们可以得到全部考生的各题、各小题的分数值,基于这些数据,可以得出很多测量指标。统计分析子系统是根据教育测量学指标体系及实际需要开发的考试成绩统计分析系统。它通过从系统合并生成的考试成绩数据(科目分、题目分、小题分)的统计分析,可实现对当次考试结果及考试本身进行科学的分析与评价。它既可实现对个人、班级、年级、学校乃至地区考试成绩的分析评价,也可实现对科目、题目乃至小题
39、的考试情况的详细分析,而且还能从横向比较、纵向分析对考试结果进行全面的剖析。为教育局和学校提高教学质量和管理水平提供了科学决策依据.2 系统功能统计分析子系统提供考试的详尽分析报告,内容涵盖了一次考试的各类分数统计及教育测量指标。其特点与功能如下: 自动整理并校验评卷子系统产生的各科评卷数据; 自定义统计分析参数; 自动报表生成器,可转存为多种文件格式; 统计数据转存; 多种固定报表类型。可即时选择统计范围; 多种自定义格式报表类型,根据需求生成不同数据的报表; 支持不同生源(地区、学校)的对比分析.3 报表类型u 考生个人考试成绩简明报表;u 考生个人考试成绩详细报表;u 班级考试成绩及排名
40、一览表;u 班级各科目考试成绩汇总表;u 班级各科及总分成绩对比报表;u 年级学生各科考试成绩一览表;u 年级各科考试成绩汇总报表;u 年级各科及总分考试成绩分布报表;u 年级各科及总分考试名次分布报表;u 年级/班级各科客观题考试分析报表;u 学校考试成绩统计报表;u 学校考试成绩对比报表;u 地区考试成绩统计报表;u 地区考试成绩对比报表。4 统计分析指标u 原始分数u 达标贡献值u 标准分(总分为标准分综合分)u Z分数u 百分等级u 排名u 分数等级u 平均分u 最高分u 最低分u 选择率u 正确率u 闪光点u 薄弱点u 标准差u 区分度u 信度u 难度u 分数分布u 名次分布上述指标
41、为可选指标,可根据实际需要选取(自由组合)。(六) 系统功能概述 零误差的识别技术国际领先的“无需定位、模糊识别”技术,既突破了定位识别对答卷设计与印刷要求过高的局限,也确保了100的正确识别。 低成本的综合应用完全的MS-Word设计,且可使用60克以上普通纸单面/双面复印、速印或胶印答卷,不但使操作简单,而且综合成本低廉。 高效率的阅卷手段免去阅卷过程对纸质答卷的操作和流水线评卷中的等待,再加上自动的登分、加分与统计分析,整体效率提高5倍以上. 客观性的评卷保证在阅卷过程中,系统自动屏蔽考生的相关信息,评卷教师只看到答题内容而不知道答卷者,确保评卷过程的客观公正。 科学化的质量监控系统对任
42、意题目双评、多评、仲裁等误差控制和对个人前后及个人与整体的一致性校验功能,最大限度地确保了阅卷质量. 可视化的过程监控系统可对评卷工作的总体进度、各题进度、个人进度以及评卷质量进行实时监控,并以数据及图表方式直观反映监控结果。 超强大的适应能力系统除适用于高(中)考网上阅卷外,其具有的阅卷批注、标志性答卷处理、在线讲评等功能使其更加适用于学校级应用. 全面性的质量分析系统可通过对不同对象、科目及题目的考试分析以及对难度、信度、区分度等指标的综合判断,实现对教学质量科学评价。 网络化的数据共享系统生成的各类统计分析报告可直接在网络服务器上发布,供有关领导、教师乃至学生共享.学校的质量分析和班级的
43、考试讲评也可通过网络直接调用相关数据,实现教学讲评的现代化.(七) 系统主要作用 确保阅卷质量系统的客观公正性保证、多评误差控制、评卷一致性检查及自动登分、加分与统计分析等功能,为提高阅卷质量提供了充分保证。 提高教学水平面向地区、学校、班级、个人的成绩统计以及针对科目、题目、知识点的答题分析,不但为教学诊断提供了依据,而且有利于提高教学水平. 减轻教师负担系统的客观题自动阅卷,主观题网上评卷及成绩自动统计分析功能,为提高阅卷效率(5倍以上),减轻教师负担提供了现代化的手段。 降低资源消耗应用本系统既无须购买昂贵的设备,也不必使用精致的答题卡,因而节省教学投资,降低考试成本,且可充分发挥现有教
44、学资源的作用。 优化教学测评应用系统灵活的答卷设计及快速、准确的统计分析功能,一方面可以方便的设计出各种教学测评表格,另一方面也将大幅度优化教学测评的环节。 提升竞争能力经常性进行高(中)考网上阅卷模式的训练,不但可使学生避免因怯场或不适应而导致的非知识性失分,而且也可及时发现学生在网上阅卷模式下存在的问题,达到发挥学生应有水平,增强学校竞争能力之目的。(八) 应用效益分析1 经济效益【1】使用60克以上普通纸制作答卷,使用成本不足高考或中考所要求答卷的十分之一;【2】使用全通进行考试阅卷的综合费用不超过使用高考网上阅卷系统费用的2/3。【3】全通具有产品化程度高、系统性能稳定、操作简单、维护容易等显著优势,用户购买后无需再依赖开发商的支持,可免去其它高考系统在用户使用时需另外向提供商支付服务费用(注:每年可节省服务费