网易首页 > 网易教育 > 留学频道 > 正文

ETS访学学者滕达:判分员是如何工作的

0
分享至
为了满足人数日益增长的考生需求,跟进托福考试考情变化,为更多考生提供最及时的信息平台,新东方《托福年度报告》重磅发布。如今的《托福考试年度报告》便是由新东方托福研究院全院上下,全国几十位培训师以及新东方前途出国的申请专家们共同完成。


新东方《托福年度报告》正式发布

网易教育讯 2015年1月27日《2014-2015新东方托福年度报告》正式发布。



滕达  ETS总部访问学者  

在未来越来越多的考试,尤其是语言类的考试会以在线机考形式出现。以TOEFL家族考试为例,本系列的考试包括TOEFL iBT,、TOEFL Junior Comprehensive、 TOEFL Primary。这些考试测试语言能力多样,参考人数众多。所以一个完善,公平,高效的在线判分系统和判分流程无比重要。在这篇文章中,我来给大家揭秘ETS神秘的判分系统和判分流程。

首先我们来说一说系统中的“人”:判分人。ETS官方网站上罗列出的测试产品有47项之多,其中有些考试可以由程序判分,比如说我们熟知的TOEFL 听力和阅读。也有不少的考试项目必须由判分员(Human-Rater)判分,比如说TOEFL口语写作这一类的主观题(Construct Response)。ETS的判分员来源多样,比如大学教授、中学教师、国际学校教师、美国高等院校考试测评专业学生。这些人要通过笔试、面试和严格的筛选培训流程才能上岗。上岗后往往会被分配到某个考试的某个科目,专人专项判分。一个成功达标的判分人可以在美国境内的任何地点登录在线判分系统进行判分。当然他们要在指定的时间内登录,因为每个判分员在登录系统时,他的判分组长也会在同样时段内保证在线,以便监督判分公平性,并给予他们所需的指导和帮助。成功登录后,每个判分员需要做当日校准(Daily Calibration)。在这个环节评分员会判一些“预置答案”,这些口语录音已经由出题员,语言学学者,考试学者组成的专家小组提前定义好了分数。判分员会对这些答案进行“盲判”,当系统确认判分员给出的分数和专家小组提前预置的分数达到给定的标准时,判分员才会被分配真实考生的答案,并对它们进行判分。在当天的真实考试的判分过程中,系统还会给他们随机分配这样的“预置答案”,以便于监控全天判分过程中的准确度。

在真实判分的过程中,他们也能获得很多帮助,这包括判分原则、标答参考、组长沟通。判分原则也就是官方提供的答案标准。以TOEFL为例,在《TOEFL官方指南》上印有详细的评分标准。判分员在判分界面上可以随时呼出电子版的标准,也有不少判分员会把标准打印成卡片放在手边,随时进行参考;标答参考也叫做Benchmark,以TOEFL口语为例,判分系统上备有4,3,2,1,0各个档位的标准答案,供判分员随时参考以便矫正自己的准确度;如果判分原则和标答参考还不足以帮助判分员界定某些答案,那么他们可以呼叫自己的小组长,小组长会在线和判分员沟通,一起评判这个答案,界定分数。

ETS还会定期对判分员的数据进行抽查,以保证考生能获得公平科学的成绩。不合格的判分员会被“回炉重造”,甚至辞退。为了避免有些教师遇到自己学生的答案,在一些美国本土的考试中,ETS会故意混搭邮政编码,以保证来自纽约市的判分员不会判到来自纽约市学生的试卷。他们也会在培训过程中和判分员强调,必须看完整个文章或听完完整口语录音才下定论给分。比如说系统会强制一个60秒的口语答案被完整播放完,判分员才能在界面上评分。有趣的是,ETS的培训官员还会和判分员强调:哪怕有些学生口出狂言在口语考试中说脏话,你也要把答案听完,也许最后有几句英语,多多少少也是可以给个一分之类的。

总而言之,ETS是个严谨负责的机构,做事态度更是精益求精,所有我们所有的考生还是要认真对待自己的分数。当然人无完人,再严谨的系统都会有误差,ETS也给我们提供了复议的选择。中国考生对复议还是不复议经常拿不准。ETS给出的回答是:当考生特别自信的认为自己的答案被误判了,就应该复议。我的意见如下,如果口语连着两次都是20分以上突然降到了15分,而且自己很确定考试当天发挥得很正常,那么就勇敢复议。如果说是怀着侥幸心理觉得复议也许会提高一分两分,那还是回家好好复习,继续冲刺吧!

相关推荐
热点推荐
有进步!快船取赛季第45胜 超上赛季总胜场

有进步!快船取赛季第45胜 超上赛季总胜场

直播吧
2024-03-28 11:38:11
Skip:选秀前我就说要选杰伦-格林当状元 他现在要成为全明星了

Skip:选秀前我就说要选杰伦-格林当状元 他现在要成为全明星了

直播吧
2024-03-28 11:08:10
林心如晒和徐若瑄合影,贴脸拍照感情好,P图严重惹质疑

林心如晒和徐若瑄合影,贴脸拍照感情好,P图严重惹质疑

小邵说剧
2024-03-26 16:11:12
看了2块钱一瓶的矿泉水成本,终于知道为什么钟睒睒能成首富了!

看了2块钱一瓶的矿泉水成本,终于知道为什么钟睒睒能成首富了!

元气科技馆
2024-03-26 20:52:19
雷军最后一战,刚刚小米汽车小米SU7全国首次亮相,人气爆棚!

雷军最后一战,刚刚小米汽车小米SU7全国首次亮相,人气爆棚!

智慧科技生活
2024-03-26 09:53:14
终于,俄罗斯找到幕后黑手,普京派人来北京,中方给了俄方想要的

终于,俄罗斯找到幕后黑手,普京派人来北京,中方给了俄方想要的

阿宇观天下
2024-03-27 15:48:51
贼精!马英九访陆,国民党正式表态,朱立伦请假,韩国瑜仍然沉默

贼精!马英九访陆,国民党正式表态,朱立伦请假,韩国瑜仍然沉默

奇思妙想草叶君
2024-03-28 14:38:41
仲景方,3味药,充血胀大,通阳起举

仲景方,3味药,充血胀大,通阳起举

护士笔记
2024-03-27 20:21:42
差距越来越小!湖人豪取五连胜仅距离国王&太阳1.5个胜场

差距越来越小!湖人豪取五连胜仅距离国王&太阳1.5个胜场

直播吧
2024-03-28 10:36:39
闹大了,知情人爆料泄露小米SU7的人真要被罚300万

闹大了,知情人爆料泄露小米SU7的人真要被罚300万

户外小阿隋
2024-03-28 17:51:52
马户承认二婚,带许方主播节奏,托人回来没人搭理

马户承认二婚,带许方主播节奏,托人回来没人搭理

娱乐圈酸柠檬
2024-03-28 18:37:51
澳门广州两女学生被骗到珠海失联,已找到!有人已转账20万

澳门广州两女学生被骗到珠海失联,已找到!有人已转账20万

南方都市报
2024-03-28 15:05:54
张兰动真格!控告大S律师,停掉大S开销,洗刷汪小菲出轨冤屈!

张兰动真格!控告大S律师,停掉大S开销,洗刷汪小菲出轨冤屈!

缘木不求娱
2024-03-27 20:20:49
76人怒喷裁判照顾快船, NBA承认绝杀球严重误判, 哈登正式回应

76人怒喷裁判照顾快船, NBA承认绝杀球严重误判, 哈登正式回应

创作者_1645063974758
2024-03-28 18:14:54
妻子出轨3人,他灭门两户人家,但放过了妻子,被抓后说出理由

妻子出轨3人,他灭门两户人家,但放过了妻子,被抓后说出理由

阿胡
2024-03-02 13:27:10
南京鸡腿比杭州贵28.1元!山姆回应“同款不同价”

南京鸡腿比杭州贵28.1元!山姆回应“同款不同价”

鲁中晨报
2024-03-28 09:41:06
三分20中13,山东三分雨多点开花 陈培东17分联手外援,仅1将低迷

三分20中13,山东三分雨多点开花 陈培东17分联手外援,仅1将低迷

替补席看球
2024-03-28 20:30:00
马英九提出登陆,想见大陆最高层,蔡英文一反常态:给予必要协助

马英九提出登陆,想见大陆最高层,蔡英文一反常态:给予必要协助

美食阿鳕
2024-03-27 19:53:50
一对恋人光天化日上演活春宫,女子还发出声响,被路人都看见了

一对恋人光天化日上演活春宫,女子还发出声响,被路人都看见了

户外阿崭
2024-03-28 13:15:55
马莱莱能上?申花烟雾弹!中超榜首战,泰山倒吸冷气,黄健翔发声

马莱莱能上?申花烟雾弹!中超榜首战,泰山倒吸冷气,黄健翔发声

话体坛
2024-03-28 11:48:27
2024-03-28 22:06:44

头条要闻

小米SU7正式发布售价公布 蔚小理董事长亮相发布会

头条要闻

小米SU7正式发布售价公布 蔚小理董事长亮相发布会

体育要闻

疯狂的格林,冲刺的火箭

娱乐要闻

莱昂纳多与25岁新女友互相投喂超恩爱

财经要闻

中国版QE要来?国内外机构观点罕见一致

科技要闻

小米SU7起价21.59万元,顶配版29.99万元

汽车要闻

混动增程双模式 长安UNI-Z售11.79万起

态度原创

教育
艺术
数码
时尚
军事航空

教育要闻

初中数学:求(a-b)(a+b)的值?用完全平方公式很简单哦

艺术要闻

艺术开卷|从闺阁、庭院到郊野,古画中的女性生活空间

数码要闻

72通道狂飙40GHz!全球首个GDDR7显存测试系统登场

人手一件的甜美公主风单品,怎么穿更适合轻熟女?

军事要闻

乌方声称击落两枚俄"锆石"高超音速导弹 俄方未予回应

无障碍浏览 进入关怀版
×