验证教学观察工具:PLAY和Teach Primary 的一种基于内容的方法 Diego Luna Bazaldua 和 Emma Carter © 2025 国际重建与发展银行 / 世界银行 1818 H Street NW Washington DC 20433 电话:202-473-1000 邮箱:AskEd@worldbank.org 网址:www.worldbank.org/en/topic/education 本报告是世界银行工作人员与外部贡献者共同完成的成果。本报告中的发现、解读和结论并不必然反映世界银行的观点、其执行董事会的观点或他们所代表政府的观点。 世界银行不对本工作中包含的数据的准确性、完整性或时效性做出保证,也不对信息中的任何错误、遗漏或差异承担责任,或对使用或未能使用信息、方法、流程或结论承担任何责任。本工作中所示边界、颜色、命名、链接/脚注和其他信息并不表明世界银行对任何领土的法律地位的判断,也不表示认可或接受这些边界。引用他人著作并不代表世界银行认可那些作者所表达的观点或其作品的内容。 本文件中没有任何内容构成、被视为或被认为是对世界银行特权与豁免权的限制或放弃,所有这些特权与豁免权均予以特别保留。 权利与许可 本作品内容受版权保护。由于世界银行鼓励其知识的传播,本作品可全部或部分地用于非商业目的,前提是必须给予本作品充分归属。 任何关于版权和许可证的问题,包括附属权利,应寄送至世界银行出版物,世界银行集团,美国华盛顿特区西北H街1818号,邮编20433;传真:202-522-2625;电子邮件:pubrights@worldbank.org。 封面设计:Marianne Siblini Diego Luna Bazaldua 和 Emma Carter 目录 1.2.3.4.5.摘要.........................................................................................................................................3关键词......................................................................................................................................3致谢.......................................................................................................................4执行摘要.......................................................................................................................5研究目标......................................................................................................................6描述观察工具 ...........................................................................................6方法.............................................................................................................................10结果.................................................................................................................................12结论...........................................................................................................................22参考文献 ..................................................................................................................................23附件 ......................................................................................................................................25附件A:支持儿童参与学习的玩耍构成要素……25附件B:表格比较Teach Primary课堂观察工具的主要特点PLAY 工具包.............................................................................................................................................30附件C:专家概述 ................................................................................................................31附件D:第一阶段完整映射结果.............................................................................................32附件E:第二阶段映射结果……47附件F:教初级和PLAY分数的相关性 ........................................................................52附件G:PLAY物品的相关性、项目总分相关性和内部表示的视觉表现结构 .................................................................................................................................................53附件H:探索性因子分析解决方案.......................................................................................58a. 内容效度结果:教学小学行为和PLAY项目的内容匹配.............................12b. 共时效度结果:教学小学和PLAY分数之间的关系.................................19c. PLAY的构念效度结果:PLAY项目的内部结构.....................................19 摘要 本研究比较了两种用于观察和评估教师如何支持学生学习的方法:乐高基金会(LEGO Foundation)的Engage工具,原名PLAY,以及世界银行(World Bank)的Teach Primary工具。目标是评估它们在教学实践测量方面的相似性和重叠。一组九名专家详细审查了这两种工具,并将PLAY的项目与Teach Primary中的相应项目进行了仔细匹配。结果表明,约三分之一的项非常匹配,表明PLAY建立在巩固的框架之上,以捕捉引人入胜的教学实践。另一三分之一的项目没有明确的匹配,意味着每个工具单独捕捉到独特的教学方面,而这些方面对方工具未能捕捉到。研究还研究了两个工具的评分如何在使用埃塞俄比亚、秘鲁和塞拉利昂的真实课堂数据的基础上进行对比。结果表明,两者之间存在微小但积极的关系,这意味着它们测量的是相关的但不同的教学方面。研究还发现,PLAY的结构可能需要进行一些调整,以便更好地反映其设计的测量技能。通过结合专家意见和数据分析,本研究为这两个工具都非常有价值但服务于不同的目的提供了强有力的证据。研究还突出了使用多种方法评估教学质量的重要性。研究还为改进工具提出了建议,并提出了课堂观察工具如何支持全球改进教学和学习下一步的措施。 JEL: I25 - 教育 经济发展 关键词 课堂观察、教学质量、吸引人的教学、社会情感学习、教学实践、内容效度、结构效度。 致谢 本文件由Diego Luna Bazaldua(高级教育专家;HEDGE)、Emma Carter(顾问;HEDGE)编制。该团队在HEDGE实践经理Halil Dundar的整体指导下开展工作。Laura Gregory(高级教育专家;HEDGE)、Sergio Venegas(经济学家,HEDGE)和MaryamAkmal(经济学家,HEDGE)在研究的不同阶段提供了整体支持。 同行评审包括Ali Hasan Ansari(高级经济学家,HAWE3),Huma Kidwai(高级教育专家,HAEE1),Ezequiel Molina(高级经济学家,HLCED)和Lauri Pynnonen(高级教育专家,HEAED)。此外,Amer Hasan和Harshil Kumar Sahai以及参与论文讨论的教育全球实践团队的其他成员提供了有价值的意见。以下是下一批国际专家名单,他们参与了工具的内容审查:Abbie Raikes,Carolina Melo Hurtado,Carolina Moreira Vasquez,Dawit Tiruneh,Elizabeth Hentschel,Jonathan Seiden,Lenka Janik Blaskova,Rabea Malik和Tadesse Teferi。 这项工作由基础学习公约(FLC)信托基金赞助。 摘要 参与式教学已成为培养儿童社会情感和认知技能的关键方法。由于教学和学习过程中嵌入式参与活动的重视,乐高基金会与世界银行合作,推进一种更基于证据的整体教学与学习提升方法。这些努力强调基于参与和社会情感学习的实践。本报告呈现了合作项目的一个重要组成部分的研究成果,重点关注比较乐高基金会的“参与”(原名“跨越岁月的趣味学习”(PLAY))。1教室观察工具,结合世界银行的“Teach Primary”教室观察工具。目标是评估这些工具在定性和定量层面上重叠的程度,为新设计的PLAY工具提供内容和同步效度证据。这项研究还旨在提高对这两个工具技术特性的理解,强调其协同作用和区别。 在方法论上,本研究的质量方面遵循了德尔菲法,涉及来自不同国际背景的九位专家。他们进行了两阶段的内容审查。第一阶段包括详细的内容比较和项目间匹配,并为匹配决策提供了理由。第二阶段侧重于审查模糊案例——在第一阶段没有明显匹配的项目。此外,定量分析评估了“教小学”和“PLAY”综合评分之间的相关性,以评估同时效度,使用来自埃塞俄比亚、秘鲁和塞拉利昂的数据。 关键定性结果显示,PLAY工具中的超过三分之一的项目与教学初级工具中的行为项目有强烈的对应关系,为前者的经验基础提供了证据。此外,研究还确定了与教学初级行为有最小或无对应关系的项目比例,突出了PLAY工具独特地捕捉有助于质量参与式教学和学习的其他教学方