新东方学员实考数据分析揭秘:托福改革后更难出分了吗?

2023年托福考试实行了比2019年更为大胆的改革,改动了稳定的写作题目,去掉了极具托福特色的“加试”,随着考试时长和题目数减少,许多疑问也困扰着着急出分及长期关注托福的学生👇

题目减少是否意味着容错率降低?出分更难?

写作题型的改变会不会影响成绩?

考生分数数据分布是否会产生变化?

改革前后分数价值还相同吗?

托福考试

ETS现有数据及一年一度Test and Data Summary报告暂时无法就以上问题给出解答,原因是2023年度报告无法区分改革考试前后;而利用未来2024年的数据对比2022年的改革前数据会产生一些误差。

为了解答这些高度关注的问题,新东方某地大学生业务过去一年1500余条学生实考数据进行了深入的数据分析研究,旨在帮助托福考生和从业者更好地了解改革前后托福考试的分数分布情况,让考生们能够更好地掌握考试的变化。通过对比分析改革前后托福考试成绩统计数据值及统计学特征,如累计频率、箱线图、直方图等,我们发现了一些有趣的结论:

  • 平均分&中位数:考试改革对于四个单项数影响较小,几乎保持不变;
  • 离散度&箱线图分析:离散度改革后听力略有降低,阅读、口语、写作与改革前相似;听力加试取消有利于分数不高的学生;
  • 分数段变化:整体获得高分难度稍增,获得中等分数更为容易;阅读和听力高分段分布有所变化,口语和写作无明显变化,学术写作讨论题型保持写作成绩稳定。

总体来说,托福考试各科依旧维持着很高的稳定性,改革对于学生最终分数的影响并不显著,下面我们具体展开来看。

一、平均分与中位数

四科均分几乎不变,中位数持平

 

托福考试

注:所有参与统计的学生都来自于单一城市并均为同一年龄段,前后两组数据虽然数量不同(改革前数据较多),但是其数据特征具有横向比较价值

首先,我们看一下考试改革前后四个单项的统计数据情况,可见四个单项在平均分数上几乎都没有变化,均在0.1~0.2分上下;而中位数则是四个单项改革前后均没有任何变化。

二、数据离散度及箱线图分析

改革后听力数据离散度稍有降低,

听力加试取消利好低分段

 

托福考试

数据离散度方面也相对比较相似,相比其他单项,听力在改革后数据的离散度稍有降低,这一点在听力改革后四分位距缩小1分上也有所体现。比较两组数据的箱线图,可以得到比较有趣的结论:

听力除了第一四分位数上升之外,其箱线图的下边缘也有所提升。由于本次考试听力改变较少,只是取消了加试,可以看出加试的取消对于听力分数不高的同学还是非常有好的,由于加试疲劳度导致的一些问题应该是得到了缓解。此外,通过箱线图可以看出口语单项在改革之后其上边缘有所下降。此部分有可能是由于改革后数据在高分段较少,使得范围内没有取到理论最大值导致,与考试改革本身无关。

三、分数段累计频率分析

高分段微幅下降,中等分段有所上升

 

托福考试

在ETS刚刚宣布考试改革的初期,很多同学会担心由于题目减少,导致高分段容错率降低,使得高分比较难以获取。本次研究做了考试改革前后数据的累计频率的对比,并计算了改革后与改革前累计频率的差值。可以看出,在28以上、25以上分数段,改革后的累计频率都有所下降,不过下降幅度较小,为1%左右,影响不大

不过有趣的是,阅读听力单项在20以上的累计频率反而是有所上升的。可以看出目前统出的数据还是支持大部分人“高分更为困难,中等分数更为容易”的预判的。不过考试改革前后,四个单项在高分段中最大的差值也仅仅为2.7%,因此可以看出考试改革对于最终分数影响并不显著。

四、单科分数段直方图分析

阅读听力轻微变化,

写作学术讨论题型维持高稳定性

下面我们再看一下各个单项直方图的对比。在阅读和听力两个单项,可以看出改革对于直方图形状的影响稍有不同。阅读单项在改革之后直方图在高分段相对拉平了一些,而在听力单项数据则向中位数更加靠拢了一些。不过两者都是在20~30这个分数段“损有余而补不足”的趋势,与前面在累计频率上提到的趋势相似。

口语和写作两个单项,考试改革前后直方图的变化则并不明显。口语方面,由于并没有发生变化,因此与之前直方图相似属于预料之中。而在写作方面直方图和其他数据的稳定则表明新的学术讨论题型在替代了独立写作的情况下保持了分数的稳定性

托福考试

托福考试

最后,我们来看一下各个单项分数与总分之间关系在考试改革前后的是否有所变化,从下图也可以基本上看出,考试改革前后,单项-总分的数据分布没有太大的变化,这一点也保持了很高的稳定性。

托福考试

总结来说,本次研究通过改革前后1500多名考生的真实数据,可以初步给出“托福考试本次改革在考试出分维度影响较小”的结论。新任CEO带来的变化虽然在改革初期让很多考生和潜在考生感受到了极大的不确定性,但是随着后续陆续考生的出分,考生们所担心的问题也一一得到了解答。可见托福考试在经历较大的改变的情况下,依旧维持了很好的一致性,从学生实际出分的角度来看,托福考试依旧非常的可靠

2023年新东方托福学员硕果累累,斩获4枚120分,3200+学员获得100+分。新东方长期收集沉淀学员学习数据及实考成绩,用于考试研究与教学研发,帮助学生更好地掌握考情及自己清晰的学习成长轨迹,实现教学研发的正向循环。此外,新东方与托福考试官方ETS长期战略合作,为学生持续提供官方工具及评分引擎如TPO、SpeechRater、erater、1:1全真模考等,助力学生的高效备考。新东方对考试数据的分析研究一直在路上,未来还会给大家带来更多深度解读,敬请期待。

最后,想嘱咐考生要明确考试改变中的变与不变,踏实提升能力,高效备考。我们要知道变的是表象,是考试时长、单项、题目,也是我们的应试节奏,但更重要的——内核是不变的

首先,考察的能力不变,本文的数据分析也印证了这一点,改革前后反映的分数不变,即考察的能力点是不会变的;

第二,备考方法不变,新东方在考试改革前后为托福做的所有的研发与教学准备都长期适用,考生需要踏实的跟着老师的指导进行备考;

最后,最重要一点就是作为一个目标留学北美的学生,竞争的程度是没有变,依旧很高,是在与全球学生比较,我们要不断提升自己的能力以应对挑战。

相关文章

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注