据人社部人事考试中心命题二处处长王世潮介绍,对于阅卷工作,广大考生可能最关心阅卷过程的公平公正性。阅卷的公平公正主要体现在两个方面:一是确保阅卷结果科学准确;二是确保阅卷信息安全,防止人为的非法篡改。阅卷管理主要围绕这两条工作主线展开。
一、确保阅卷结果科学准确的主要措施
确保行政职业能力测验评分结果科学准确的主要措施是:在正式评分之前,设置了试评环节,主要测算各道试题的质量(难度和区分度),根据测验各部分的权重和各道试题的质量确定评分标准,供正式评分使用,确保评分结果的科学性。最终的自动评分工作由指定的专人负责,在封闭、公平公正的环境中,和技术人员一起设置好标答、条形码信息、试卷种类之间的对应关系后,由评分软件系统自动处理完成。
确保申论评分结果科学合理的主要措施有:
1.通过试评提前确定了正评中各种疑难问题的处理原则。所有阅卷员掌握执行标答后,开始进入试评阶段。试评是正式网络评分(正评)的模拟,组织实施过程与正评完全一样,目的是要提前发现正评过程中可能出现的各种异议或问题(培训中没有讲到的),便于核心专家和管理人员在正评开始前研究、明确处理的原则、程序,进一步完善评分尺度。
2.设置专门执行标答制定环节,目的是要提高评分标答科学性。考试结束后,命题核心专家和阅卷核心专家一起,会在全体考生中随机抽取一定数量的答卷,研究考生答题的整体状况和好中差答卷的各种表现,以命题过程中形成的标答为基础,修订完善各题答题要点或能力要素的表述及其相应的分值,这就是执行标答。这样的标答,既遵循了命题的基本原理、试题设计的基本设想,又充分考虑了考生群体的特点和能力水平。
3.通过双评以上误差控制法有效控制主观评分的误差。评分实行双评以上误差控制法,每份申论的每道题首先由两名阅卷员在互不知道对方身份、评分结果的情况下进行独立打分,避免了传统阅卷中阅卷员评分情况互相干扰的现象。如果两名阅卷员打分结果的差异处在事先设定的误差范围内,则两者的平均分就是考生在这道题上的最后得分。如果双方打分结果的差异超出了事先设定的误差范围,则会有第三个阅卷员参与评分,三人打分结果中取两人差异较小的平均分为考生的得分,如果三人打分的结果均超出了误差控制范围,则交由阅卷核心专家裁定。由于三评结果在理论上更容易出现同时偏高或同时偏低的现象,所以,将三评率降低到一个合理水平也是试评工作的一个主要目的。
4.设置了明确的阅卷员培训合格标准。在执行标答制定环节,阅卷核心专家就要亲自评阅一定数量的试卷,形成几百份好、中、差的样卷及相应的分数,这就是标杆卷库。网络评分工作开始之前,阅卷核心专家要向阅卷员详细介绍执行标答的具体内涵和分值分布,阅卷员了解掌握后,试着对标杆卷库中的样卷进行评分,当他们的评分结果与核心专家的评分结果基本一致时,才算培训合格。
5.对阅卷员评分质量全程实时监控。所有考生每道题的最终得分都是在正评阶段形成的。正评过程中,评分软件系统随时会把一定数量的标杆卷、阅卷员已经评过的答卷让阅卷员重新评分,以此检测阅卷员对执行标答的掌握是否始终如一、评分尺度的把控是否前后一致、评分工作状态是否稳定等。阅卷管理人员也会经常查看每位阅卷员的评分结果统计曲线,判断阅卷员是否把好中差的答卷有效地区分开来。如果发现有明显的评分质量问题,会及时采取思想沟通、重新评分、重新培训、取消阅卷员资格等管理手段,确保评分质量。
二、确保答题卡扫描过程安全的主要措施
答题卡扫描工作的主要目的是把考生的答题信息准确无误地转化成数据库信息,便于评分软件系统进行自动化评分或随机派发给阅卷员进行评分,确保考试分数的形成过程公平公正。确保答题卡扫描过程安全的主要措施有:
1.读卡扫描现场屏蔽可能影响考生竞争力的信息。行政职业能力测验是公务员考试中标准化的能力考试科目,阅卷中的关键信息主要有标答、转化后的答题信息、条形码信息与试卷类型的对应关系、报考职位信息等。标答、转化后的答题信息、条形码信息共同决定了考生最后的考试分数;考试分数和报考职位信息一起,又决定了考生在报考职位竞争中的最终排名。在扫描阶段,标答始终处于密封保管状态,工作人员接触不到、也看不到。转化后的答题信息一旦扫描形成,软件系统自动锁定,工作人员看不到,也改不了。条形码信息与试卷类型的对应关系、考生的报考职位信息已经在考试开始前做了保密处理,不出现在读卡工作之中。通过屏蔽可能影响考生竞争力的信息,使得读卡人员即使想修改答题信息,也无从入手。
2.阅卷工作处于有关监督部门的全程监督之下,所有阅卷信息修改均要接受有关监督部门的逐一审核。为保证成绩公布时所有信息准确无误,有些信息如身份证号个别数字错误、姓名中的同音字错误等,需要人工修改,主要有两种情况:一种情况是考生在报名阶段误填的信息,考生发现后提出修改申请,在不影响报考资格的前提下,核实后给予修改;另一种情况是考务人员和监考人员在考试实施过程中核对考生个人信息时发现错误的,确认不属于作弊又不影响报考资格的,给予修改。所有修改过的信息要列出清单,电脑修改操作的过程也会自动形成工作日志,均供有关监督部门审核。
3.严密卷库管理。答卷存放配备防潮、防火、防失窃、防泄密等措施;在阅卷期间应实行24小时2人以上专人不间断值守,并全程视频监控;答卷出库扫描时必须清点、交接并签字;阅卷人员使用完答卷后再入库时,还须再一次清点、交接并签字等。
4.完善阅卷场所安保、消防、监控等设施,对工作人员进行安全警示教育,严肃纪律、明确工作责任。
5.采用图像扫描识别技术,杜绝工作人员修改答题卡信息的任何机会。目前的中央机关公务员考试行政职业能力测验阅卷,实行先进行答题卡图像、再进行答题信息识别的读卡方式,读卡人员手中没有2B铅笔,只有用于答题卡袋编号及异常情况记录的红笔,无法修改考生答题卡上的任何信息。