本研究评估了在尼日利亚 secondary education 中利用大型语言模型进行虚拟辅导的项目影响。项目使用 Microsoft Copilot(由 GPT-4 驱动)支持一年级的 senior secondary students 在六个星期内学习英语。研究采用随机对照试验,结果显示:
- 项目显著提升了学生的学习成果。参与项目的学生在包含英语、人工智能和数字技能的评估中得分提高了 0.31 个标准差,其中英语得分提高了 0.23 个标准差。
- 项目对不同能力水平的学生均有积极影响。无论学生的基线能力如何,项目都能带来积极效果,但效果在初始学术表现较好的学生和女性学生中更为显著。
- 项目具有成本效益。六个星期的试点项目产生的学习成果相当于 1.5 到 2 年的常规学习,每 100 美元投资可带来 3.2 个等效学习年,超过了许多其他干预措施。
- 项目具有良好的可扩展性。项目使用免费的现成模型,无需大量定制,且利用当地员工进行实施,有助于降低成本并提高可扩展性。
研究结果表明,人工智能驱动的辅导项目在资源有限的低收入环境中具有变革性的影响。然而,政策制定者必须解决数字素养和技术获取方面的差距,以确保所有学生都能平等地受益。