AI智能总结
杰夫·艾伦 执行摘要 本研究调查了在使用不同的评估和绩效标准来评估大学和职业准备过程中相关的关键问题,这与高中问责制系统直接相关。对大量高中生进行了考察,他们都完成了大学准备评估(ACT)和职业准备评估(ACTWorkKeys)。 ACT考试和工作技能评估旨在衡量相关但不同的结构。这两种评估都衡量数学、阅读和数据解释能力,并与大学和职业准备标准保持一致。ACT考试评估通常在高中教授的知识、技能和概念,这些对于大学课程相关,而工作技能评估侧重于工作环境中的基础技能。ACT强调学术技能,而工作技能突出技能转移到专业环境的能力。这两种评估都能预测大学成果,如大学一年级平均绩点,以及工作成果。 本研究考察了在高中问责体系中,通过合并两种测试结果能够获得多少额外信息。学生表现根据为大学和职业准备而独立建立的表现水平进行评估,各水平通过针对高等教育和工作要求量身定制的标准制定过程确定。 主要发现包括: • ACT考试的表现与WorkKeys评估的表现密切相关,但每种评估都为大学或职业准备提供了一些独特的信息。• 高中生通常分为三类:那些已经准备好上大学和从事职业的人,那些已经准备好从事职业但没有准备好上大学的人,以及那些既没有准备好上大学也没有准备好从事职业的人。下表显示了根据ACT综合分数和WorkKeys NCRC的绩效水平,每个类别的学生百分比。 注意ACT综合分数达到20分及以上对应州级 proficiency 标准,而WorkKeys NCRC 等级达到银级及以上表示具备职业 readiness。 • 许多在英语语言艺术、数学或科学方面几乎达到熟练水平的学生的职业准备基础技能是必要的。下表显示了根据 ACT 测试的州级绩效标准,在那些几乎达到熟练水平的学生的百分比中,获得银奖或更高 NCRC 的学生比例。 • 从事技能型职业的学生,在职业准备能力测试中的表现通常优于大学准备能力测试。下表显示了在职业准备能力测试中表现优于大学准备能力测试的学生计划职业群体。 • 虽然只有一个评估和一套绩效标准可以提高效率并被联邦问责所接受,但针对大学和职业准备制定不同的评估和绩效标准至少有三项好处。 • 对所有学生的高中评估与他们的大学或工作计划的相关性更高,无论他们的计划如何。 • 对衡量和报告大学和职业准备程度具有更高的准确性,反映了大学和职业准备程度的不同标准。 •获得大学和职业准备资格对学生带来的好处,为就业、工作培训项目、大学录取和奖学金打开机会。 引言 K-12教育体系的主要目标包括为大学、职业或军事服务培养学生。反映这些目标,各州已采用参考大学和职业准备的内容和绩效标准。对大多数州而言,相同的内容标准、绩效标准和高中学业水平考试被用于衡量大学和职业准备。这种做法提供了评估效率,并满足了《每个学生成功法案》(ESSA)中要求使用与各州内容标准对齐的评估工具来衡量学业成就的要求。此外,一些评估,包括ACT®考试,已经为大学和职业准备相关的声明提供了支持证据。 一种用于高中评估的替代方法使用不同的评估方式——以及不同的表现标准——来衡量大学和职业准备程度。这种评估方法已被一些州采用,其中职业准备评估结果仅计入学业成就法案第五项学校质量或学生成功的指标。 在本报告中,我们考察了关于使用不同评估和不同大学与职业准备绩效标准的关键问题。我们考察了参加 ACT 考试和 ACT WorkKeys® 评估的高中学生的数据。我们分析了数据以解决以下问题: 1) 大学准备程度(ACT)和职业准备程度(WorkKeys)衡量标准的相关程度如何? 2)有多少学生是大学准备就绪的、职业准备就绪的、两者都准备就绪的,还是两者都不准备就绪的? 3) 对于有特定高等教育计划或兴趣的学生,他们在职业准备方面的表现相对于大学准备是否相对更好? 方法论 在本节中,我们描述了用于解决研究问题的措施、样本和数据。我们首先描述了大学和职业准备能力的措施以及为这些措施建立的不同绩效标准。接下来,我们描述了本研究的基础的高中生样本。然后,我们描述了用于解决每个研究问题的分析程序。 © 2025 由 ACT 教育公司版权所有。 大学和职业准备度测量指标 ACT大学准备基准和州ACT表现水平 ACT考试测量学生在英语、阅读、数学、科学和写作方面的学术成就和大学准备情况。它旨在确定学生在对大学成功重要的学科领域解决问题的能力、把握隐含意义、得出推论、评估观点和做出判断的技能 (ACT, 2025a, 第1页)。英语语言艺术(ELA)分数总结学生在英语、阅读和写作测试中的表现;STEM分数总结学生在数学和科学测试中的表现;综合分数总结学生在英语、数学和阅读测试中的表现。1 ACT大学准备基准是ACT分数,代表了学生在公共、第一学年学分课程中获得B或更高分数的50%机会,以及获得C或更高分数的大约75-80%机会所要求的成就水平。根据美国数百所大学收集的数据,已经为ACT各部分测试分数,以及STEM和ELA分数建立了基准(Allen,2013年;Mattern等人,2015年;Radunzel等人,2017年)。表1列出了基准以及用于建立它们的课程。 虽然ACT考试被设计为评估大学准备情况,但它也提供职业准备情况的解读。例如,ACT职业准备进展指标(ACT Progress Toward Career Readiness Indicator)使用ACT综合分数来预测考生获得ACT工作关键国家职业准备证书™(NCRC®)的水平。此外,ACT综合分数可以预测未来的收入(Mattern & Cruce,2021)。ACT测试的知识和技能与大学和职业准备标准的通用框架相一致(ACT, 2025a, 第14页)。 一些州使用ACT作为其高中问责制考试,以满足《每个学生成功法案》(ESSA)下的评估和报告要求。这些州召集了来自全州的教师和其他利益相关者,为ACT英语、数学,在某些情况下为科学分数设定绩效标准。所使用的标准制定程序包括 用于推导ACT大学准备基准的相同大学成果数据、比较性的州和国家数据、特定州的表现数据,以及该州标准设定小组专家的判断。2 这些标准设定事件导致了英语语言艺术(ELA)、数学和科学的状态特定绩效水平。大多数州为每个科目采用四个绩效水平,其中水平3的“熟练”切割分数也代表大学准备就绪。表2总结了为ACT分数设定的绩效水平。典型分数范围是基于在联邦问责制中使用四个绩效水平设定了ACT绩效标准的各州的中位切割分数。3表2也显示了每个性能水平已采用的名称示例。 使用act ela分数与act英语+阅读(e+r)分数的等百分比联接,表2还显示了与ela分数范围最可比的e+r分数范围。如后面所述,e+r分数范围用于近似ela表现水平,因为我们样本中的大多数学生没有参加act写作的选考,因此没有ela分数。 也可以考虑ACT综合分数的性能水平。一种对ACT综合分数进行分类的方法是基于表2中提供的典型州ACT分数性能水平。通过使用英语+阅读和数学的典型切割分数,可以近似地确定相应的ACT综合切割分数,使用公式Composite = (英语+阅读+数学)/3。使用这种方法,ACT综合分数的范围是1-14(级别1),15-19(级别2),20-25(级别3),以及26-36(级别4)。 将ACT综合分数进行分类的另一种方法是基于ACT职业准备进展指标。尽管这个指标基于主要用于衡量大学准备情况的考试和综合分数,但它预测了学生的职业准备水平。已经用1-12的综合分数范围建立了五个水平(非- 资格),13-15(青铜),16-20(白银),21-26(黄金),以及27-36(白金)(ACT,2025b)。黄金级别也与ACT基准一致,英语、阅读和数学基准的平均值为21。 ACT工作技能国家职业准备证书 ACT工作技能评估衡量在工作中取得成功所需的基础技能。该评估使用来自职场情境的文章,并且所有文章都经过职场真实性评估。国家职业能力证书(NCRC)是一项便携式、基于证据的凭证,通过完成三门工作技能选择题评估——应用数学、图形素养和工作文档获得。 国家职业技能鉴定中心认证了广泛行业和职业成功所需的基本工作技能。它衡量了人们在将数学推理和问题解决应用于相关工作问题时使用的技能、阅读和使用书面文件完成工作的技能,以及理解以图形格式呈现的信息并随后使用信息解决问题的技能(ACT,2025c,第1页)。 每项WorkKeys评估的表现均使用量表分(范围从65到90)和等级分(分为六个等级)进行报告。这些分数等级通过标准设定流程确定,并报告为0、3、4、5、6和7(ACT,2025c,第110-114页)。NCRC根据三项评估中获得的最低等级分颁发:在所有评估中获得6级或7级者获得白金NCRC;最低等级分为5者获得黄金NCRC;最低分数为4者获得白银NCRC;最低分数为3者获得青铜NCRC。本文使用NCRC获得五个等级(不合格、青铜、白银、黄金和白金)来考察职业准备情况。持有白银NCRC的个人具备大多数美国工作中所需的基础技能(Lefebvre & Steedle,2019)。虽然白银或更高等级的NCRC表明学生具备大多数职业所需的基础技能,但其中许多职业仍然需要高中毕业后的教育或在职培训。有关NCRC的更多细节请见此处。 虽然国家职业资格认证中心(NCRC)主要用于认证职业准备能力,但也有证据表明其与大学准备能力相关。例如,一项最近的研究分析了首年大学生样本的数据,发现NCRC水平可预测首年累积平均学分绩点,相关系数为0.41(Conway,2023)。另一项研究发现,三个 © 2025 由 ACT 教育公司版权所有。 为了衡量批判性思维和解决问题的能力,这些能力与成人教育的高校与职业准备标准(ACT,2025c,第19页)相一致,NCRC测试是必需的。此外,美国教育委员会(www.acenet.edu)建议高等教育机构为获得银、金或白金NCRC的个人授予学分。 研究样本 我们分析了在2022年秋季至2025年夏季之间,358,920名学生在一年内分别参加ACT和WorkKeys评估的大样本数据。为进行分析,收集了每位学生最近一次ACT考试尝试和最近一次WorkKeys尝试(应用数学、图形素养和工作场所文件)的数据。对样本中68%,最近一次ACT考试尝试发生在11年级春季ACT州合同考试期间。由于极少有学生参加了没有科学考试的增强版ACT,我们将样本限制为参加了包含科学考试的ACT测试的学生。 为了比较大学和职业准备情况,评估测试应紧密进行。例如,如果两次测试间隔一年,我们会担心学业增长会通过抬高第二次测试的表现而扭曲结果。对样本中的32%,ACT测试是在WorkKeys测试至少一个月后才进行的;5%在同一个月内完成了两次评估;而63%是在ACT测试至少一个月后才进行WorkKeys测试的。为了在可比的时间点上评估大学和职业准备情况,数据被加权以平衡在WorkKeys评估前进行ACT测试的学生比例与在ACT测试前进行WorkKeys评估的学生比例。加权后,两次测试之间的平均月数是0.0。 表3展示了在应用加权前后样本的描述性统计数据。此外,为了进行比较,表3还包含了参考人口的描述性统计数据:在2025年春季,根据ACT州合同在22个州学校期间接受评估的所有11年级学生。参考人口可被解释为类似于美国11年级公立学校学生的人口。 加权样本中女性占54%,男性占46%,种族/民族构成如下:49%白人,30%黑人,11%西班牙裔,5%两种或以上种族,2%亚裔,1%美洲原住民,以及<0.5%夏威夷原住民/其他太平洋岛民。学生来自30个州,大部分样本来自六个州之一(NC、LA、AL、MS、AR和KS)。在ACT考试时,大多数学生年龄为16岁(20%)、17岁(58%)或18岁(19%),1%年龄在15岁或以下,1%年龄在19岁或以上。与参考人群相比,该样本中女性或黑人的学生比例较高,男性或西班牙裔的学生比例较低。该样