从 COVID - 19 大流行中学习损失和恢复 ： 证据的系统评价

学习损失并从 COVID - 19 泛型中恢复证据的系统性审查Nina Ashley Dela Cruz, Ann Jillian Adona, Rhea Molato - Gayares 和 Albert ParkNO. 717March 2024亚行经济工作论文系列亚洲发展银行 亚行经济工作论文系列从 COVID - 19 大流行中学习损失和恢复 ： 证据的系统评价Nina Ashley Dela Cruz, Ann Jillian Adona, Rhea Molato - Gayares 和 Albert Park第 717 号 ， 2024 年 3 月Nina Ashley Dela Cruz (naodelacruz @ gmail. com) 是兰州大学的博士生。 Ann Jillian Adona (adona. jill @ gmail. com) 是旧金山大学的硕士生。 Rhea Molato -Gayares （ rmolato @ adb. org ） 是副经济官员 ， Albert Park （ afpark @ adb. org ） 是亚洲开发银行经济研究与发展影响部首席经济学家兼总干事。亚洲发展银行The亚行经济工作论文系列提出正在进行的研究 ， 以引起对亚洲及太平洋发展问题的评论并鼓励辩论。表达的观点是作者的观点 ， 不一定反映亚行的观点和政策或其理事会或其代表的政府。 知识共享署名 3.0 IGO 许可证 (CC BY 3.0 IGO)© 2024 亚洲开发银行菲律宾马尼拉大都会 1550 号亚行大道 6 号电话 63 2 8632 4444 ； 传真 63 2 8636 2444保留部分权利。出版于 2024 年。ISSN 2313 - 6537 （ 印刷 ） ， 2313 - 6545 （ 电子 ） 出版物库存编号 WPS240093 - 2DOI ： http: / / dx. doi. org / 10.22617 / WPS240093 - 2本出版物中表达的观点是作者的观点 ， 不一定反映亚洲开发银行 （ ADB ） 或其理事会或其代表的政府的观点和政策。亚行不保证本出版物中包含的数据的准确性 ， 也不对其使用的任何后果承担任何责任。提及特定公司或制造商的产品并不意味着它们得到亚行的认可或推荐 ， 而不是其他未提及的类似性质的公司或产品。通过对特定领土或地理区域进行任何指定或提及 ， 或在本出版物中使用 “国家 ” 一词 ， 亚行无意对任何领土或区域的法律或其他地位做出任何判断。本出版物可通过知识共享署名 3.0 IGO 许可证 (CC BY 3.0 IGO) https: / / creativecommons. org / licenses / by / 3.0 / igo / 。通过使用本出版物的内容 ， 您同意受本许可证条款的约束。有关归属、翻译、改编和权限 ， 请阅读 https: / / www. adb. org / terms - use 。本 CC 许可不适用于本出版物中的非亚行版权材料。如果该材料归因于其他来源 ， 请联系该来源的版权所有者或出版商以获得复制许可。亚行对因使用该材料而引起的任何索赔概不负责。请联系 pubsmarketing @ adb. org ， 如果您对内容有疑问或意见 ， 或者如果您希望获得版权许可 ， 您的预期使用不属于这些条款 ， 或使用亚行标志的许可。亚行出版物的更正可在 http: / / www. adb. org / publications / corrigenda 找到。注意 ：亚行承认 “中国 ” 为中华人民共和国。 摘要这项系统评价涵盖了 56 项研究，这些研究衡量了在冠状病毒病 （ COVID - 19 ） 大流行期间学校关闭对学习成果的影响，以及 20 项研究，这些研究评估了减少学习损失的措施的影响。它限制了对可靠对照组的评估的关注，并提供了对学习损失的首次荟萃分析，该分析涵盖了比发达国家 （ 15 ） 更多的发展中国家 （ 21 ） 。我们发现，学校关闭一年与学习损失有关，相当于 1.1 年的学习价值，而学校重新开放可将这些损失减少到 0.5 年。关于减少学习损失的措施，我们发现，亲自或通过手机提供的辅导对减轻学习损失具有积极的统计学意义。关键字:学习损失, COVID - 19, 教育, 系统评价, 荟萃分析JEL 代码:I20, I21, I24, I28作者感谢 Minhaj Mahmud ， David Anthony Raitzer ， Lennart Reiners 和 Daniel Suryadarma 的意见和建议 ， 以及 2023 年 10 月 24 日 ERDI 系列研讨会的参与者。 1Introduction冠状病毒病 (COVID - 19) 大流行导致教育中断，规模空前。全球至少有 70 ％ 的国家决定在某个时候关闭学校 （ 亚洲开发银行 [ADB] 2022 ） 。学校完全关闭，平均 20 周没有面对面上课，中位数为 16 周。包括部分关闭，当学校因特定年级关闭或每周关闭几天时，关闭的总时间平均为 41 周，中位数为 37 周 (联合国教育、科学及文化组织 [教科文组织] 统计研究所 2023 年) 。已经进行了许多研究来衡量这些中断对学习成果的影响，以及替代学习模式如何减轻学习损失。了解学习损失的程度以及减轻学习损失的计划的影响对于设计更具弹性的教育系统具有重要的政策意义。在这篇系统综述中，我们根据利用考试成绩直接衡量学习成果的实证研究，对这些问题的证据进行了荟萃分析。我们包括研究不同知识领域的学习，包括数学，阅读理解，语言和批判性思维。除了评估学习损失的平均程度外 ， 我们还评估了不同研究的估计学习损失的差异在多大程度上可以用特定国家的因素来解释。这有助于更深入地理解在大流行期间塑造学生教育经历的动态。我们的审查还总结了有关旨在限制大流行期间学习损失或恢复因学校关闭而造成的学习损失的特定干预措施的影响的证据。通过检查各种干预措施的有效性，例如技术辅助学习和辅导计划，我们确定了基于证据的做法，可以为教育政策和干预措施提供信息。这次审查的结果将有助于正在进行的工作。 2关于在后大流行时代使教育系统更具弹性的论述 ， 并有望为教育领域未来的研究、政策和实践提供信息。我们的系统综述建立并扩展了以前关于学习损失的综述文章 （ Betth ä ser，Bach - Mortese 和 Egzell 2023 ； Moscoviz 和 Evas 2022 ； Patrios，Vegas，Carter - Ra 2022 ； Patrios 2023 ； Sabarwal 等人。2023 年 ） 。它在几个方面区别于以前的研究。首先，与以前的研究相比，它对发展中国家的覆盖率更高 （ 表 1 ） 。这一点很重要，因为发展中国家关闭学校的持续时间通常更长，发展中国家关闭学校的脆弱性预计会更大，例如，由于互联网接入更少，家庭资源更少，发展中国家的学校质量可能会更低 (世界银行 2022) 。其次，它是为数不多的采用透明纳入标准的审查之一，要求研究具有可靠的识别策略，对照组不受流行病的影响。我们的搜索涵盖了截至 2023 年 7 月发布的研究，该研究比以前的评论晚，还包括学校重新开放的时期，使我们能够测试重新开放如何影响学习成果。表 1 ： 关于 COVID - 19 大流行对学习成果影响的系统审查的国家覆盖率Review涵盖的国家数量发展中的数量涵盖的国家Betthauser et al. 2023154莫斯科维兹和埃文斯 2022258Sabarwal, et al. 2023229Patrinos 20234119Patrinos, 拉斯维加斯, Carter - Rau 2022204这篇论文3621COVID - 19 = 冠状病毒病。来源 ： 作者。1 采用严格质量标准的其他研究包括 Betth ä user ， Bach - Mortensen 和 Engzell （ 2023 ） 和 Sabarwal 等人 （ 2023 ） 。 3我们的审查包括 56 项衡量关闭学校影响的研究和 20 项评估减轻这些损失的干预措施效果的研究。我们发现 ， 在 COVID - 19 大流行期间关闭一个教学年的学校导致相当于 1.1 年的学习损失。当学校重新开放时 ， 这种学习损失会得到缓解。通过手机进行的教程在许多国家进行了测试 ， 并证明了在限制学习损失方面的有效性。亲自辅导在恢复学习损失方面特别有效。在线学习和数字 / EdTech 干预措施也在几个国家进行了测试 ， 但结果喜忧参半。2Methods2.1纳入标准这项审查包括 2020 年 9 月至 2023 年 7 月之间进行的研究，这些研究衡量了中小学教育的学习成果。搜索仅限于使用定量评估工具来衡量学习成果的研究，包括标准化测试，成绩测试，诊断测试和特定主题评估 （ i 。Procedres.、数学、阅读、语言) 。我们只包括量化 “治疗 ” 学生和可比“ 对照 ” 组之间表现差异的研究。为了估计学习损失，符合我们质量标准的研究设计可以分为三种类型 ：(i) 队列差异 ， 其中比较大流行前后 n 年级学生的考试成绩 ； （ ii ） 比较大流行前后 n 年级学生考试成绩变化的队列差异 ； （ iii ） 类似于(ii)但使用个体面板数据。对于量化干预影响的研究 ， 可接受的影响评价研究设计包括随机对照试验 (RCT) 、回归不连续设计 (RDD) 、倾向得分匹配 (PSM) 、工具变量和差异差异 (DID) 。定性分析方法 ， 如文献综述、关键 4线人访谈 ， 焦点小组讨论 ， 描述性分析 ， 案例研究 ， 观点文章 ， 简报和社论不符合本评论的条件。审查包括符合上述标准的同行评审文章和灰色文献 (如报告、工作文件、简报) 。它不限于任何特定的地理区域。它只包括英语文章。2.2搜索和审查策略我们开发了以下布尔搜索字符串 ， 定义了我们的人口 ， 暴露和感兴趣的结果 ： “（ 影响或影响 ） 和 （ COVID * 或冠状病毒 ） 和学校 * 和 （ clos * 或关闭 ） 以及学生和 （ 教育结果或评估 * 或分数 * 或测试 * 或成就或学习或入学或参与 ） 或 （ 补救 * 或缓解 * ） 。 ”我们使用此字符串来搜索以下搜索引擎，电子图书馆和影响评估注册表 ： EcoLit，教育资源信息中心 （ ERIC ），国际社会科学参考书目 （ IBSS ） ，Web of Sciece ： 社会科学引文索引 （ SSCI ），Google Scholar，PbMed，3ie 系统审查数据库，EPPI - Cetre 证据图书馆，坎贝尔图书馆，科克伦图书馆，美国经济协会 （ AEA ） RCT 注册中心，大英发展研究图书馆 （ BLDS ），世界银行和国际货币基金组织联合图书馆 （ JOLIS ），3ie 影响评估注册中心 （ IDRIE ） 国际发展影响评估中心。Snowball 抽样是通过检查研究的参考列表来确定符合本综述的其他主要研究。此外 ， 还包括通过专业网络和推荐引起作者注意的研究。The screening process involved several stages. After the comprehensive search, duplicates were removed and the remaining studies were divided between two of the co authers for title and abstract screening were then 5根据纳入标准进行全文筛选。通过让两个审阅者独立筛选 10 项常见研究的全文并验证解释和方法的一致性，来测试和建立审阅者间的可靠性。在确认了审稿人之间的可靠性之后，其余的研究在两位审稿人之间进行了全