AI智能总结
在...上对评分进行解释增强版ACT:K-12指南并且高等教育机构 詹姆斯·里德尔斯佩格尔 ACT州和联邦政策 提升ACT效率 去年,ACT宣布了一系列旨在现代化ACT考试并为学生提供更多选择和灵活性的改进措施。这些改进措施通过允许学生选择是否参加科学评估,从而减少了测试长度,最多可缩短三分之一。对于那些在学校日进行ACT考试的状态和地区,也给予了更多的灵活性:他们可以选择是否提供包含科学的ACT考试,就像他们目前选择是否提供写作部分一样。当科学和写作是他们考试的一部分时,他们可以选择在英语、数学和阅读三个核心部分之外,单独安排这些部分的考试。 这些更新针对教育工作者和研究人员关于在大型评估中平衡效率和准确性的反馈。通过减少测试疲劳和简化评估的某些要素,我们力求创造一个更加公平、易于获得的经验,同时保留ACT作为全国认可的学术成就和大学准备水平的传统角色。我们在这方面的改进保持了测试的可靠性、预测效度和与各州学术标准的协调一致。 我们力求创造一个更加公平、易于获取的体验,同时保留ACT作为全国公认的学业成就和大学入学准备度衡量标准的历史角色。 为了准备增强功能的发布,我们最近发布了技术文档,详细说明了测试开发过程以及用于验证ACT继续成为衡量大学入学准备能力的强大工具所采用的数据分析。1本简报作为对中等和高等教育利益相关者的指南,概述了这些分析的两个关键发现: 1. 我们开发了测试增强措施,以确保传统ACT考试各科目的分数与增强版ACT各科目的分数可以相互替代。因此,我们预计州或其他机构不需要重新考虑在决策中使用ACT考试各科目的分数。 2. 在改进后的ACT考试中,综合分数将使用英语、数学和阅读部分的成绩(以下简称“EMR”)来计算。这个综合分数可以与传统的ACT考试的综合分数互换使用,后者使用英语、数学、阅读和科学成绩来计算(以下简称“EMRS”),尽管这两个分数在实际应用中存在一些差异。预计在某些情况下,分数将有所不同。 学生个体差异可能导致分数分布略有不同。对于大多数用途而言,这些差异的幅度与利益相关者所看到的综合分数分布年度变化幅度相似。 以下为详细研究结果。在接下来的讨论中,“传统”ACT 指的是在 2025-26 日历年内逐步淘汰的考试版本,而“增强”ACT 指的是更新、缩短的 ACT 测试体验。有关增强功能的信息,请访问我们的网站。2 设计增强功能 ACT测试背后的信念是,学生为大学和职场做准备的最佳评估方式是通过尽可能直接地衡量他们在高中阶段学习到的、对成功完成大一课程所必需的技能。所需的学术技能可以通过重现工作中所需的复杂性来最直接地评估。 《ACT能力提升方案》为学生、各州和地区提供了更多的灵活性。 学生通常在高中完成学业,并预期在大学课堂中继续学业。因此,ACT考试旨在评估学生如何巧妙地解决问题、把握隐含含义、推理、评估观点以及在大学成功所需的学科领域做出判断的能力。ACT考试的哲学基础在增强时不会改变。 在之后的周期性审查中,如同往常,成立了外部专家小组,以评估对传统ACT的拟议更改,以及ACT测试所评估的知识和技能。我们为每个测试部分设立了一个单独的小组,选择评委的原因是他们渊博的知识、专业能力和经验。这些小组还评估了规格和蓝图与几个州高中标准在英语语言艺术、数学和科学方面的契合度。此外,我们的技术顾问委员会(TAC)评估了增强版ACT蓝图和规格的草案和最终版本,以验证该评估将继续预测大学的职业准备情况。有关对测试规格和蓝图所做的更改的详细内容,可以在即将发布的《增强版ACT测试设计框架》中找到。 将增强版和传统版ACT测试联系起来。 在2024年,在新形式的增强版ACT构建完成后,我们进行了一项“链接”研究,以确保增强版ACT能够测量与旧版ACT相同的技能和知识,同时保持高标准的准确性、公平性和一致的评分解释。该研究使用了一个大型代表性的ACT考试参与者样本,这些参与者被随机分配参加旧版ACT考试形式或两种新形式之一。 增强型ACT表格。结果显示,增强型ACT的科目测试成绩与旧版ACT的成绩可以互换。 研究结果证实,改进后的ACT提供了一个可靠和有效的学生学术准备度的衡量标准,支持在教育环境中对分数的一致解释和使用。因此,我们不预期各州或其他机构在决策过程中需要改变对ACT部分测试分数的使用。例如,通过标准制定过程设定的表现水平和其他ACT部分切分分数可以继续使用。 测试长度缩短对精度有轻微影响,但并未影响所测量的结构。 主要区别在于,与传统的ACT相比,增强版的ACT题目更少,测试时间更短,但每个问题的时间更长。这一变化旨在减少测试疲劳并改善测试体验。然而,这样的修改可能会引起测试部分所测量的结构的变化以及分数精度的降低。这些因素在上文所述的认知实验室和外部评审中被评估。然后,我们的分析在 连接研究确保了有效连接所需的构念等效性得到了实证验证;连接研究在下面进行了描述,并在《增强ACT连接研究报告》中有完整细节。3 为确保这种变化不影响每个测试部分中被测量的结构,我们使用了各种模型进行了验证性因素分析。这些分析的结果如下: 在测量构建等价性方面表现出了稳定性,增强型ACT形式的拟合指数和因子负荷与旧版ACT形式类似。换句话说,分析表明,旧版和增强型测试部分测量的是相同的潜在学术技能。正如预期的那样,减少问题数量确实导致了可靠性小幅下降和测量标准误差的小幅增加。然而,这些变化很小,并且远在可接受的行业标准范围内。特别是,每个部分测试的可靠性都保持在0.80以上。这一结果表明,总体而言,测试的增强并没有从根本上改变分数的准确性。 增强版ACT的科目分数可与旧版ACT的科目分数互换。 在确定传统和增强版ACT考试足够相似之后,我们使用一种被称为IRT真分数等值法的成熟方法将增强版考试与传统考试联系起来。这项研究的这一部分出现了三个重要发现: 我们比较了增强型和传统形式测试题目的难度,以确保增强型形式符合测试规范。分析确认,增强型形式确实符合测试规范,并且难度上的微小差异不会影响两种形式得分之间的可比性。 各州及其他机构无需重新审视他们对ACT考试分数的解释,以用于决策和问责。 • 链接结果导致传统形式和增强形式几乎相同的分数分布,这意味着分数代表着传统形式和增强形式相同的成就水平,如表1所示。 • 人口不变性评估的结果表明,传统形式和增强形式之间的一致性,表明链接结果是稳健的。 这些发现共同表明,增强版ACT在测量属性上与原有ACT保持一致,增强版ACT的各部分得分可与原有ACT的各部分得分互换,从而允许直接比较两次评估的学生得分。因此,各州和其他机构在决策和问责制方面将无需重新审视他们对ACT各部分得分的解读。 理解新的综合评分计算方法 给学生提供可选的科学部分灵活性,迫使我们改变计算ACT综合分数的方式。在传统ACT中,综合分数是学生在英语、数学、阅读和科学部分得分的平均值(“EMRS”)。在增强版ACT中,综合分数是英语、数学和阅读部分得分的平均值(“EMR”)。对于参加科学测试的学生,科学部分得分和STEM分数(科学和数学部分得分的平均值)将继续被报告。虽然科学分数将不再包含在综合计算中,但它仍然是衡量学生科学推理能力和为STEM相关领域准备情况的有价值指标,组织机构可能继续考虑科学和STEM分数作为录取和奖学金决策的依据。 因为综合分数是衡量整体学术准备情况的重要指标,在许多机构的决策中发挥着关键作用,因此了解新的EMR综合分数及其与旧EMRS版本的关联非常重要。我们对这些变化的研究总结如下。完整详情请参阅技术报告:“增强版ACT测试成绩解读的初步证据”。4我们的分析表明,增强型ACT的复合分数可以与相同目的的原始复合分数互换使用。 此外,两个分数的分布之间存在一些实际差异,这些差异是机构应预料的,以下将对此进行讨论。 综合评分计算可以互换。 我们的研究确定,除了非常低的综合评分外,EMRS和EMR评分在每一项上都是一致的。也就是说,当我们建立了EMR和EMRS综合评分之间的等百分位评分一致性时,与任何EMRS评分高于13分的最近EMR评分是相同的。同样的分析显示,EMR评分是EMRS评分的一个几乎完美的预测指标,相关系数为0.99。因此,不需要在旧版ACT综合评分和增强版ACT综合评分之间进行转换,我们将报告EMRS和EMR计算的复合评分,它们可以相互替换。在所有官方评分报告中,学生将只获得一个综合评分,并且不会有标签表明它是EMR还是EMRS。利益相关者可以根据测试日期确定综合评分版本——从2025年4月开始的网络全国考试和从2025年9月开始的所有考试都将报告新的EMR综合评分。5 我们的分析证实了使用综合评分进行决策的适宜性,因为EMR和EMRS综合评分在预测大学生在大学中的成功方面具有几乎相同的预测能力。事实上,如图2所示,综合评分与大学成果(第一年GPA、获得学位的可能性)之间的相关性。 学士学位以及获得任何学位的可能性,对于从传统ACT考试中获得的EMRS分数以及从模拟增强ACT中获得的患者电子病历(EMR)是相同的。(请注意,模拟考虑了增强ACT较短的测试长度。) 同样,图3显示,EMRS和EMR综合评分与高中GPA和ACT难度指数相关联,这种指数可以用来比较学生在不同课程中的课程表现,其水平几乎相同。 因此,我们将交替报告EMR和EMRS综合评分,相关证据应鼓励利益相关者继续像过去一样使用综合评分。此外,当前的ACT-SAT一致性可以继续使用。6 新复合评分计算的实际意义 尽管我们的研究为将EMR综合评分与EMRS综合评分互换使用提供了坚实的基础,但有一些实际考虑因素,利益相关者应该了解。7 首先,将会有一个过渡期,在这个期间,一些考生将收到EMR综合分数,而其他人将收到EMRS综合分数。在2025年春季,大多数初中生将 尽管更新对照表的正式工作尚未开始,ACT研究人员已经做好了准备。与College Board的同行在适当的时候进行合作,如果确定需要进行的话。更新是必要的。对ACT和SAT分数之间的一致性进行审查和更新是必要的。充足的数据来自同时参加了加强版ACT考试和数字版SAT考试的学生。 7请注意,这些差异并未达到通常用作统计阈值的标准p<.05水平。重要性。 获得EMRS综合评分8而我们将从9月份开始为所有考生报告EMR综合分数,预计2025年ACT测试的毕业生几乎都将拥有EMR计算的综合分数,ACT- 2025 2025. 因此,我们 测试的2026届毕业生将包含基于EMR计算的复合分数和基于EMRS计算的复合分数的混合,而2027届ACT测试的毕业生几乎都将拥有基于EMR计算的分数。在表4中提供了基于学生最后一次ACT分数的历史毕业生数据得出的预测。高等教育机构可能看到2026届学生的EMR分数比例将大于此处预测的,因为申请大学的学生更有可能多次参加ACT考试,这使得他们最近一次的考试(以及超级分数)成为参考。9)很可能是新的EMR综合评分。 第二个实际考虑因素是我们预计在综合分数分布中得分最低的学生人数将略有增加。因此,我们预计大多数人群的平均ACT综合分数将下降约0.1到0.4分,如图4所示。重要的是要注意,预期的下降尽管实际存在并可能产生实际影响,但下降的幅度仍处于综合分数年度正常变化的范围内。此外,如果所有学生都参加了科学测试,我们预计有超过90%的学生其EMR综合分数将与如果报告了传统综合分数时其EMRS综合分数相差不超过一分。 鉴于我们对高等教育机构在组织规划方面提供全面支持的愿望,我们正在向那些接收ACT分数的高等教育机构提供补充报告。这些报告将帮助它们了解和规划任何由于合成分数计算方式改变而产生的轻微影响。报告显示了达到或超过每个分数水平的学生数量的预测情况。 该新EMR综合评分点与显示旧EMRS综合评分的历史数据并列。这些信息可用于评估基于综合评分阈值的现有项目可能受到的影响。 额外资源 为了支持利益相关者了解向增强