ChatGPT裸考Digital SAT,成绩能得多少分?击败52%考生!

2022年3月11日,全球国际考场的考生将参加第一次正式机考SAT,现在大家都在紧张的冲刺备战中。

再紧张也要注意一下劳逸结合,今天是星期日,TD SAT教研组奉上一篇推文,让同学们看看我们作为万物之灵长,生物进化史上的奇迹——现代智人的一员,的智商,还有多久会被ChatGPT这个无机物追上。

纸笔考SAT:

ChatGPT击败了全球52%的考生

去年12月,已经有一位国外网友,把一整套SAT纸笔考卷子给ChatGPT做了一下,结果如下:

图片

阅读共52题,错了19题。

语法共44题,错了18题。

数学共57题,错了29题。

得分1020分,根据CB官方统计,这个分数略高于考生得分的中位数,也就是说,ChatGPT的成绩击败52%的考生。

对于大部分考生来说,是阅读最难,数学最容易,但是从以上的成绩来看,ChatGPT在阅读方面的表现比数学要好

机考SAT:改革对ChatGPT有利,
让它可以击败更多考生

机考SAT变化最大的一点是阅读部分的passage变短,且不再考查“伟大文献”。Passage越短,passage里面的古旧语句消失,这一改革显然对擅长用当代英语言语对话的ChatGPT有利。尽管ChatGPT不需要考大学,它还是想问CB:你们把passage改短,是不是就是为了让我击败全球80%的考生?

下面TD SAT教研组和大家一起看看ChatGPT在机考SAT官方Practice 1中的表现。

Practice test 1,语文module 1,第1题,词汇填空题,回答正确。

图片

Practice test 1,语文module 1,第2题,词汇填空题,回答错误。

图片

Practice test 1,语文module 1,第3题,句子功能题,回答错误。

图片

这时候我们开始为ChatGPT担心,什么人工智能,怎么做三道错两道,但接下来ChatGPT就开始发力了。

Practice test 1,语文module 1,第4题,句子功能题(修辞目的题),回答正确。

图片

Practice test 1,语文module 1,第5题,双篇综合分析题,文字较多,ChatGPT轻松答对。

图片

Practice test 1,语文module 1,第6题,事实信息题,回答正确。这道题考的是简·奥斯丁的《理智与情感》,1811年的文字,没有难倒ChatGPT。

图片

Practice test 1,语文module 1,第7题,事实信息题,回答正确。考的是1901年的小说,ChatGPT不但答对,还主动解释了它为什么选D。机器人都会写解析了。这让TD SAT教研组负责小程序“真题捕手”答疑的老师们有种不爽和不祥的感觉。

图片

接下来的第8题是考的是莎士比亚1609年写的诗,ChatGPT显然熟读《莎士比亚全集》,所以还是轻松答对并再次给出了解析。

图片

第9题是一道考逻辑思维的“增强削弱题”,ChatGPT轻松拿下。

图片

第10题是图文结合题,这道题里的图表主要是一个表,表里所含的文字较多,所以ChatGPT答对了

图片

第11题也是一道图表题,但是这道题里的“图表”主要是图(graph),我们无法在和ChatGPT的对话框中输入图片,所以这道题ChatGPT只看到了文字,看不到图,而做题必须看到图才行,所以就做错了

图片

ChatGPT不怕最难的文字逻辑题,却怕上面这个柱状图,它甚至看不出来哪根柱子最高。

图片

第12题也是一个不带“图”但是带“表”的题,ChatGPT做对并给出了详细解析。

图片

根据第10题、第11题和第12题这三题的情况,我们可以看出ChatGPT的文字推理能力强,而对于图表题,只要我们人类把图表上的关键信息用文字表述出来,ChatGPT就能准确理解。但是如果是各种不太方便用文字表达的图,那怕是简单的柱状图,ChatGPT也看不懂。可以这样说,ChatGPT就像一个大脑强而眼睛不强的人。

文章篇幅有限,以下我们不再附图片。考试结果是,语文的第一个module,共27道题ChatGPT做错了10题,有惊无险地在第二个module遇到更难的那个module。第二个module,ChatGPT表现好一些,27题错了8题,很可惜的是,这8题里有5题是较简单的语法题。

对较难的语法题(比如第26题和第27题这两道考“修辞的综合”的题,每个module的第26题和第27题,ChatGPT准确率达到100%。),ChatGPT全都能做对。但是对一些简单的“标点符号”和“句间过渡”题,却做错了。

ChatGPT的做题速度远高于活人。如果不是因为TD SAT教研组的手速慢,ChatGPT做完整张卷子的“阅读和语法”部分答的全部54题,一共用时大概十分钟。

由于数学题图表较多,ChatGPT看不懂题目,且数学不是大多数亚裔学生的痛点,我们这次就没有让它做数学。

 

向ChatGPT学习它的学习精神

TD SAT教研组用最原始的方法,先把ChatGPT做的答案挤记在纸上。

图片

接下来,假装自己是ChatGPT,登录Bluebook,让这两个软件互掐,一顿操作后,看到“你做完了卷子!”(You’ are all finished, 这句话TD SAT教研组一直觉得是CB故意在一语双关“你完蛋了!”)字样。

图片

然后听CB的话,到My SAT去帮ChatGPT看它的成绩。

图片

我们看到ChatGPT的机考SAT语文成绩是610分,比它在2022年12月裸考纸笔考SAT得的520分要高近100分,考虑到ChatGPT做错的题大部分是语法中的标点符号题,而解这一类题的能力相对容易提高,所以只要再做对四五道不该错的标点符号题,ChatGPT的语文部分应该能稳定在690分左右。再假设ChatGPT的数学是790分,那么它的机考SAT水平应该是在1480分左右

对SAT培训行业来说,ChatGPT的出现会让老师们有了一点紧迫感,因为这个机器人它会写解析,虽然正确率还不高。而对于我们广大考生来说,没有很大意义,因为反正考试肯定不能带它取。CB将来也可能特别注意禁止考生在用于考试的电脑上安装ChatGPT类软件插件。我们从ChatGPT裸考机考SAT斩下1400多分这件事上要学习的,还是这个机器人热爱学习、不断提高自我知识水平的精神

TD SAT教研组 TD北美留学进化论

相关文章

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注