2023 年发展合作评估系统

评价系统在发展公司‑操作2023 这项工作由经合组织秘书长负责出版。本文表达的意见和采用的论点不一定反映经合组织成员国的官方观点。 本文件以及本文所包含的任何数据和地图均不影响任何领土的地位或主权，国际边界和边界的划定以及任何领土，城市或地区的名称。 请引用本出版物： 经合组织(2023)，2023年发展合作评估系统，经合组织出版社，巴黎，https: / / doi. org / 10.1787 /a255365e - en。 ISBN 978 - 92 - 64 - 97099 - 1（打印）ISBN 978 - 92 - 64 - 94893 - 8 (pdf)ISBN 978 - 92 - 64 - 81989 - 4 (HTML)ISBN 978 - 92 - 64 - 81455 - 4 (epub) 照片信用：封面© enjoynz，盖蒂图片社 经合组织出版物的更正可在以下网站上找到：www. oecd. org / about / publishing / corrigenda. htm。© OECD 2023 前言 评价在提高发展合作和人道主义援助的效力和影响方面发挥着至关重要的作用。通过提供有关干预过程和结果的高质量和及时证据，评估揭示了哪些有效，哪些无效，为什么以及对谁有效。评估在组织学习，塑造未来决策和资源分配以改善影响方面发挥着关键作用，并加强发展行为者的透明度和问责制。评估证据也在回应国内需求方面发挥作用，以证明国际援助的结果和物有所值。 但是，没有强大的系统，评估就不可能有效。在这种情况下，经合组织发展援助委员会（DAC）发展评估网络（EvalNet）系列评估系统研究的总体目标是促使人们对人道主义和发展评估进行批判性思考，并帮助加强EvalNet参与者及其他方面的评估系统。 该系列的最新报告为开发合作提供商提供了见解，因为他们寻求建立或加强自己的可信，适合目的的评估系统。它借鉴了EvalNet成员和观察员组织的经验，提供了发展合作和人道主义援助评估系统的核心要素和工作方式的快照。它确定了主要趋势，涵盖了评价的作用，政策和体制安排，评价过程以及评价结果的使用。这项研究涵盖了EvalNet成员国和观察员，重点是中央评估单位。它为具有既定评估系统的发援会成员国提供了简介。研究包括文献综述、调查和关键线人访谈。 第一章概述了研究的目的、范围和方法。第2章探讨了评估在发展合作和人道主义援助中的作用。第3章概述了用于管理评估系统的各种政策和体制安排。第4章回顾了评估过程，首先是如何决定进行哪些评估。第5章着重于如何使用评估结果来改善开发合作努力。附件C中提供了每个参与者的简介。 Acknowledgements 本报告由经合组织发展合作局的审查、结果、评价和发展创新(RREDI)司作为发展援助委员会(发援会)发展评价网络(EvalNet)秘书处编写。它是由Ldhiya Johso，Piper Hart和Mega Keedy - Choae在Rahl Malhotra部门负责人的战略指导下准备的。 这项研究得益于许多同事的贡献。作者要感谢：Aliso Pollard和Mariaa Gamarra在设计研究和支持数据收集的初始阶段所做的工作；Kasem Alhaei和Jiyi Dig在准备组织简介方面的支持；Nelso Torbay - Holgi对出版过程的支持；和RachelSberro - Kessler，亚历杭德罗·格雷罗和艾米丽·博世为会员参与提供意见和支持。 作者还要感谢所有EvalNet成员和参与者对研究准备工作的支持和参与。如果没有EvalNet成员和观察员组织的75多名工作人员的支持，这项工作是不可能的，他们提供了书面意见并参加了个人访谈。我们要特别感谢研究咨询小组的指导：塞西莉亚·德克尔和莉丝·玛丽·范登德里什（比利时）；阿努·萨克森和桑纳·普尔基宁（芬兰）；弗兰克·柯万（爱尔兰）；Kaiawa Waaa（日本）；和Peter Va Der Kaap（荷兰）。 作者感谢Stephanie Coic对平面设计的支持；Fiona Hinchcliffe编辑文档；以及Laura Sahun和Ola Kasneci促进出版过程。 目录 前言3 致谢4 缩写和首字母缩略词8 执行摘要9 1背景和方法111.1.背景技术121.2.范围和方法13附注15 2评价的作用162.1.评价目的172.2.评价的数量和类型19参考文献25附注25 3政策和体制安排26 3.1.原则和政策273.2.治理和独立313.3.Resourcing 33参考文献34附注35 4评价进程36 4.1.评价计划374.2.评价设计384.3.进行评价394.4.在COVID - 19 40的背景下进行评估4.5.质量保证424.6.共同工作434.7.合作伙伴国家/地区参与444.8.能力加强45参考文献47附注48 65使用评估证据495.1.使用评价结果505.2.管理响应系统53参考文献55 附件A.经合组织发援会网络成员和观察员组织发展评价 附件B.评价资源58 附件C.经合组织发援会发展评价成员网络简介59 Figures 图1.1研究方法图2.1. OECD评价标准图2.2. 2011 - 2016年与2017 - 2021年的评估总数图2.3. 2017 - 2021年评估总数图2.4. 2021年进行的集中评价总数，双边组织图2.5. 2021年进行的集中评估总数，多边组织图2.6.按角色划分的2021年平均评价次数图3.1. EvalNet参与者报告的主要指导评价原则图3.2.采用评估政策的组织比例，2010 - 2021年图3.3.将交叉问题纳入评价指南图4.1. 2016年与2021年评估工作计划持续时间图4.2. 2010年至2021年参与组织进行联合评价的份额图4.3.伙伴国家参与评价图5.1.评估实用程序检查表图5.2.评估知识产品 TABLES 143443 表1.1.参与组织表3.1. 2010年至2021年用于评价的财政资源表4.1. EBA的质量保证流程 表A A.1. EvalNet成员和观察员组织名单表A B.1. 2021年各参与组织评估的估计支出 5658 BOXES 方框1.1.发援会对评价系统的审查：简史方框2.1.德国的评价方框2.2.亚洲基础设施投资银行的评价方框2.3.评估类型方框3.1.确保联合王国评价的效用方框3.2.确保包容性评价的指导方框4.1.奥地利发展合作中的可评价性评估方框4.2. COVID - 19大流行引发的评估创新方框4.3.瑞典评价中的质量保证方框4.4.建立评价能力的成员实例 遵循经合组织关于以下方面的出版物： theOECD newsletters / 缩写和首字母缩略词 AIIB亚洲基础设施投资银行ADA奥地利开发署亚行亚洲开发银行AFD法国发展机构(法国)AfDB非洲开发银行BMZ联邦经济合作与发展部(德国)COVID - 19冠状病毒病2019DAC发展援助委员会DEVAL德国发展评价研究所(德国)DFAT外交和贸易部(澳大利亚)EBA援助研究专家组(瑞典)EvalNet发展援助委员会发展评估网络FCDO外交、联邦和发展办公室(英国)FPS外国Affairs联邦公共服务外交事务(比利时)GAC加拿大全球事务部GEI全球评价倡议GIZDeutsche Gesellschaft f ü r Internationale Zusammenarbeit (Germany)GNI国民总收入IOB政策和运营评估部IsDB伊斯兰开发银行JICA日本国际协力事业团KfWKreditanstalt f ü r Wiederaufbau开发银行(德国)KOICA韩国国际合作署(韩国)MEAE欧洲和埃特朗尔代办部(法国)北美防空司令部挪威发展合作署(挪威)官方发展援助官方发展援助SDC瑞士发展与合作署(瑞士)SEO特别评价办公室(比利时)SIDA瑞典国际发展合作署(瑞典)UNDP联合国开发计划署 执行摘要 主要发现 该研究表明，参与组织进行的集中评估数量有所增加。相比之下，联合评价的数量有所下降，突出了加强合作的空间。平均而言，大多数多边组织根据各自的任务规定，比双边组织进行更多的评估。然而，除此之外，一个组织提供的发展合作的数量、组织的年龄和进行的集中评估的数量之间没有一致的、可识别的关系。 指导各组织评估的宗旨和原则具有很强的一致性，这些评估主要基于经合组织的长期政策指导文件，证明了它们的持续相关性。独立性和有用性的评价原则是最常被引用的。这与以前的调查结果一致，表明全球评估界对评估系统的核心要素以及对质量最重要的原则达成了共识。 所有组织都指出，评价单位在结构和功能上都是独立的，许多向独立的监督委员会报告。在管理评价的机构安排上也有很强的一致性，几乎所有组织都有评价政策和指导。这显示了评价在发展合作提供者工作中的核心地位。 对评价有用性的日益重视反映了在实现学习目标方面持续存在的挑战。参与组织正在采取协调一致的行动来解决这一问题，确保在评估过程中尽早考虑有用性，更多地与最终用户接触，确保评估反映政策优先事项，并确保调查结果的时间符合方案周期。 虽然管理评估系统的目的，原则和机构安排有明显的共同点，但参与组织进行评估的方式存在差异，通常与组织的规模和资源有关。例如，较大的组织报告说大部分评估工作是在内部进行的，而较小的组织则监督外部评估人员。 最近几年来，虚拟数据收集方法的运用增多。虽然这种转变是在新冠肺炎大流行之前进行的，但危机的爆发加速了这种转变，这场危机需要实时证据来证明应对和恢复方案的成功，并限制成员组织工作人员的旅行。许多组织指出，他们将继续使用大流行期间开发的创新。 最后，有限的伙伴国家参与评价阻碍了发展合作的充分所有权。大多数组织指出，要求伙伴国家政府促进访问和数据收集，但没有有意义地参与实质性规划或评价后续行动。 未来行动领域 这些发现为EvalNet成员和评估人员提供了五个更广泛的行动点： 致力于更全面地了解组织内的数据和证据，以支持学习和战略规划。虽然可能需要保持这些不同职能的独特治理结构和作用，但探索一种跨不同单位收集证据的共同方法可能是有价值的，以支持更系统和有效的数据收集，以实现跨领域学习目标。这需要与该机构的其他部门密切合作，例如统计，结果报告，研究和权力下放的评估单位。 制定一种共同的方法来评估用于评估活动的资源。本研究的数据收集和分析揭示了计算参与组织用于评估的金额的许多不同方式。收集这些信息的目的是了解各种要素的支出份额(例如Procedre，人力资源，沟通）以及总体资源是否足以使评估职能发挥作用。按评估类型创建成本基准也可能很有用。巩固虚拟工作方式的学习。关于COVID - 19大流行期间虚拟参与和数据收集的价值的报告各不相同。虽然有些人认为虚拟方法对于扩大利益相关者的参与很重要，但另一些人则认为它们会损害质量。尽管有这些混合报告，但几乎所有组织都计划继续使用虚拟方法。鉴于此，探索虚拟方法何时效果最佳以及何时需要亲自评估工作以及开发指导可能是有用的。跟踪何时以及如何使用评估结果以及循证决策的总体状态。本报告中反复出现的主题是满足学习目标的挑战：许多受访者正在寻找新的更有效的方法来增加发现的使用。随着新的利益相关者（内部和外部）参与和传播方式的测试，现在是衡量哪种方法最有效的时候了，以期以明确的吸收途径开始每次评估。重新审视所有权问题及其与伙伴国家参与的联系。与伙伴国家更多地参与评价将促进国家对发展活动的自主权，并增强评价能力。这将有助于履行对国家所有权和本地化的发展合作承诺。 1背景和方法 这项研究是定期系列中的最新版本，旨在促进围绕发展合作和人道主义援助评估的批判性思考，以期加强评估系统。 1.1.背景 评估是一个严格检查干预的过程1（例如Procedre、政策、计