Also available in English language: The Imperative of Evidence-Based Development Cooperation
In einer Welt, die mit mehreren intersektionalen Krisen konfrontiert ist, von gewaltsamen Konflikten und autokratischen Entwicklungen bis hin zur Klimakrise, stehen staatliche Entwicklungsagenturen vor einer gewaltigen Aufgabe, wenn es darum geht, Projekte und Partnerschaften zu priorisieren.
Oft werden diese Entscheidungen stark von politischen Erwägungen, innenpolitischen Interessen und außenpolitischen Zielen beeinflusst, wobei zuweilen auf nachweislich wirksame Programme verzichtet wird, die durch robuste Evidenz gestützt werden. Auch wenn eine rein evidenzbasierte Entwicklungszusammenarbeit unerreichbar sein mag, ist die systematische Integration von evidenzbasierter Entscheidungsfindung und belastbarer Evidenz in die Politikplanung und das Programmmanagement eine praktikable politische Entscheidung.
Ein geeignetes Beispiel für evidenzbasierte Entscheidungsfindung ist die Möglichkeit, kosteneffiziente Gesundheitsinterventionen zu bewerten. Während einige Interventionen sehr kostengünstig sind und weniger als 200 US-Dollar pro vermiedenem behinderungsbereinigtem Lebensjahr erfordern, kosten andere bis zu 1000 US-Dollar. Das Wissen um die Kosteneffizienz verschiedener Gesundheitsmaßnahmen kann einer Regierung mit begrenzten Ressourcen helfen zu entscheiden, wo sie ihr globales Gesundheitsbudget einsetzen will.
So ist beispielsweise die vorbeugende Chemotherapie bei Onchozerkose, einer parasitären Wurminfektion, in Ländern mit niedrigem Einkommen eine äußerst kosteneffiziente Maßnahme, während andere Gesundheitsinterventionen in diesem Zusammenhang weit weniger kosteneffektiv sind. Während Faktoren wie Gerechtigkeit, Erschwinglichkeit und Nachhaltigkeit von großer Bedeutung sind, bieten solide evidenzbasierte Informationen wertvolle Hinweise für eine effektive Priorisierung der globalen Gesundheitsausgaben.
Diese Donor Tracker Partner Perspektive, in Zusammenarbeit mit Kooperation Global, diskutiert die Bedeutung einer evidenzbasierten Entscheidungsfindung in der Entwicklungszusammenarbeit. Sie beleuchtet Ansätze und Praktiken zur Förderung der Nutzung robuster Evidenz und betont die Notwendigkeit für Regierungen, robuste Methoden zu integrieren, um die Wirkung ihrer Bemühungen in der Entwicklungszusammenarbeit zu maximieren und weltweit signifikante Veränderungen herbeizuführen.
Die Verwendung von Evidenz, die auf wissenschaftlichen Bewertungen basiert, auch bekannt als robuste Evidenz, hat einen großen Vorteil im Vergleich zu herkömmlicher Evidenz, die ausschließlich auf der Bewertung von Ergebnissen basiert, ohne tiefere Ursachen zu untersuchen. Robuste Evidenz deckt viel mehr Details auf und beleuchtet detaillierter als herkömmliche Bewertungsmethoden und kann so auch ursächliche Beziehungen nachweisen.
Wenn man beispielsweise feststellt, dass sich die Lese- und Schreibfähigkeit von Kindern nach einer schulischen Intervention wie der Verbesserung eines Lehrplans verbessert hat, wie dies bei der traditionellen Ergebniserhebung der Fall sein könnte, kann die Verbesserung nicht schlüssig auf diese spezifische Intervention zurückgeführt werden. Es könnte das Ergebnis unvorhergesehener oder unbeabsichtigter Faktoren sein, wie z. B. eine verstärkte Beteiligung der Eltern am Lernen zu Hause, die nicht Teil der Intervention waren. Im Gegensatz dazu wäre eine rigorose Wirkungsanalyse in der Lage, die Wirkung der Intervention zu isolieren, indem eine Behandlungsgruppe mit einer vergleichenden Kontrollgruppe verglichen wird, um die wahre Ursache für die Verbesserungen zu erkennen.
Ein weiteres Beispiel für die Generierung robuster Nachweise ist eine Methodik, die als Cash-Benchmarking bekannt ist und die Ergebnisse eines Projekts oder Programms mit einem Szenario vergleicht, in dem die Begünstigten Geldtransfers in gleicher Höhe der Implementierungskosten erhalten. Dieser Ansatz trägt der Tatsache Rechnung, dass die Empfänger oft ein besseres Verständnis dafür haben, wie sie Mittel zur Verbesserung ihres Lebens einsetzen können, als Programmdesigner, und dass sie am besten in der Lage sind, ihren eigenen individuellen Bedürfnissen und Kontexten gerecht zu werden. Wenn die mit den Programmen erzielten Ergebnisse die Vorteile von Geldtransfers nicht übersteigen, wäre es ratsam, das Programmdesign vor der Genehmigung zu überdenken.
Mehrere Akteure haben die Bedeutung evidenzbasierter Ansätze bereits erkannt und Schritte und Initiativen unternommen, um sie in ihren Initiativen der Entwicklungszusammenarbeit umzusetzen.
Im Jahr 2011 hat USAID seine aktuelle Evaluierungspolitik verabschiedet. Diese Politik setzt sich für eine solide Evaluierungspraxis ein, die auf einer soliden Planung und Gestaltung, einem unabhängigen Urteilsvermögen, hochwertigen Methoden und evidenzbasierten Ergebnissen beruht. Seitdem hat sich die Organisationskultur von USAID deutlich gewandelt, weg von der Compliance-Mentalität hin zu einer ganzheitlicheren Bewertung der Entwicklungszusammenarbeit.
Im Zeitraum 2011-2016 gab es zum Beispiel folgende Veränderungen:
Leadership Commitment: Die Leiter der Agentur betonten die Bedeutung von Fakten für die Entscheidungsfindung und förderten eine Kultur der fundierten Antworten auf der Grundlage von Evaluierungen;
Anreize für Qualität: Durchführung von Wettbewerben für herausragende Leistungen in der Evaluierung und von unabhängigen Studien zur Verbesserung der Evaluierungsqualität;
Aufbau von Mitarbeiterkapazitäten: Angebot von formellen Schulungen, Workshops, technischer Unterstützung bei Monitoring & Evaluation sowie Einstellung von Fachpersonal; und
Vernetzung: Aufbau interner Praxisgemeinschaften und Zusammenarbeit mit Externen, um bei den Evaluierungsmethoden auf dem neuesten Stand zu bleiben.
Diese Bemühungen wurden mit der Agency Learning Agenda 2022-2026 von USAID fortgesetzt, in der Lernfragen und -aktivitäten definiert wurden, die auf die Verbesserung der Generierung, Synthese, Weitergabe und Nutzung von Erkenntnissen ausgerichtet sind. USAID hat zudem Dean Karlan, den Gründer von Innovations for Poverty Action und einen führenden Entwicklungsökonomen, eingestellt, um einen Großteil seines Jahresbudgets von 41 Milliarden Dollar in bewährte, kosteneffektive, evidenzbasierte Programme zu lenken.
Norwegen hat kürzlich sein Engagement für eine qualitativ hochwertige und evidenzbasierte Entwicklungszusammenarbeit zum Ausdruck gebracht. Diese Erklärung unterstreicht die Integration von Wirkungsevaluierung und formativer Forschung in Entwicklungsprogramme. Im Einklang mit dieser übergreifenden Verpflichtung hat Norad den Inkubator für Wirkungsevaluierung ins Leben gerufen, einen von Norad finanzierten dreitägigen Workshop für NRO, der ihnen die wesentlichen Fähigkeiten vermittelt, um bewährte Verfahren der Evaluierungsmethodik zu übernehmen und praktische Herausforderungen effektiv anzugehen. Außerdem verabschiedete Norad eine Richtlinie, die eine Kostenanalyse bei allen Wirkungsevaluierungen vorschreibt, um eine Wirksamkeitsanalyse zu ermöglichen und bessere, relevantere Informationen für künftige politische Entscheidungen und die Politikgestaltung zu liefern.
Die FCDO des Vereinigten Königreichs führte eine Initiative ein, die als "Knowledge, Evidence and Learning for Development" bekannt ist. Bei dieser Initiative handelt es sich um einen Forschungs-Helpdesk für die FCDO sowie für andere britische Regierungsstellen und Forschungspartner, der schnellen Zugang zu Fakten und analytischen Erkenntnissen in Bezug auf Entwicklungspolitik und -programme bietet. Der Helpdesk umfasst sowohl Standardberichte als auch tiefer gehende Analysen, die sich mit neuen Themen und Lernprodukten befassen. Darüber hinaus dient er als Plattform zur Förderung des Dialogs und der Reflexion in Verbindung mit realen Fallbeispielen und praktischen Anwendungen. Angesichts des Erfolgs ist eine Folgeinitiative in Arbeit, die auf den Erkenntnissen der ersten Phase aufbauen und weitere, nicht ODA-bezogene Themen in einem breiteren Spektrum von Aufgaben in den Bereichen Entwicklung und Diplomatie angehen soll.
Die Regierungen befinden sich in unterschiedlichen Stadien des Prozesses, robuste Evidenz in der Politik zu erkennen und nutzbar zu machen. Die Schweiz und Deutschland zum Beispiel haben bei der Einbeziehung belastbarer Evidenz einige begrenzte Fortschritte gemacht, aber es besteht noch ein großes Potenzial.
Die OECD hat der Schweiz ein gutes Zeugnis für ihre Entwicklungszusammenarbeit ausgestellt, und auch ihre Evaluationspraxis wird allgemein positiv bewertet. Die Direktion für Entwicklung und Zusammenarbeit hat 2008 beschlossen, jährlich 0,6-0,8% ihres Gesamtbudgets für externe und interne Evaluationen auszugeben. Dementsprechend gibt sie jedes Jahr zahlreiche thematische und institutionelle Evaluationen in Auftrag, die von unabhängigen und externen Expertenteams durchgeführt werden, die Evaluationen von Länder- und regionalen Kooperationsprogrammen im In- und Ausland organisieren.
Rigorose Wirkungsevaluierungen machen jedoch nur etwa 2 % aller Evaluierungs- und Forschungsprojekte aus und stellen einen äußerst geringen Anteil der Evaluierungen dar (laut öffentlicher Datenbank und auf der Grundlage eigener Berechnungen). Diese Beobachtung wird besonders bedeutsam, wenn man bedenkt, dass ein Anteil von 10 % an ähnlich rigorosen Evaluationen bei USAID immer noch als relativ niedrig angesehen wird. Die laufende Entwicklung der Schweizer Strategie für die internationale Zusammenarbeit 2025-2028 sowie die aktuelle Überprüfung der Qualität von Projektevaluationen bieten die Möglichkeit, robuste Evidenz in der zukünftigen Praxis der Entwicklungszusammenarbeit zu verankern.
Deutschland hat begonnen, Initiativen zur Förderung evidenzbasierter Ansätze zu stärken, darunter die Initiative zu Rigorous Impact Evaluations. Diese Initiative umfasst eine solide Evidenzdatenbank, die unter anderem zahlreiche von der GIZ durchgeführte rigorose Wirkungsevaluierungen enthält. Deutschland hat auch die interaktive Datenbank der KfW für Evaluierung und Lernen ins Leben gerufen, die leicht zugängliche, filterbare und individuell zugeschnittene Evidenz und Wissen für Projekte und Programme des BMZ bereitstellt. Ein OECD-Bericht unterstreicht jedoch die Empfehlung an Deutschland, ein stärker ergebnisorientiertes Management und eine ergebnisorientierte Kultur zu schaffen, die in der Lage ist, seine thematischen, regionalen und globalen Programme zu bewerten und zu evaluieren und daraus zu lernen. Eine Studie über den Status quo rigoroser Wirkungsevaluierungen ergab, dass rigorose Evidenz in der deutschen Entwicklungszusammenarbeit nur kaum genutzt wird.
Ein vielversprechender nächster Schritt zur Stärkung der Nutzung und Generierung robuster Evidenz ist die Einrichtung von Evidenz-Hotlines zur Unterstützung von Programmmanagern und die obligatorische Erwähnung von robuster Evidenz in Projektvorschlägen sowie die Stärkung der Rolle und Funktionalität des Deutschen Instituts für Entwicklungsevaluierung zur Bereitstellung robuster Evidenz, die sowohl auf strategischer Programm-, Projekt- als auch auf politischer Ebene relevant ist.
Auf der Grundlage von Beispielen führender Entwicklungsakteure, mehrerer Expert*innen-Interviews mit Beamten und Berater*innen von Entwicklungsagenturen sowie akademischer Forschung werden den Regierungen die folgenden Maßnahmen empfohlen, um belastbare Evidenz in der Entwicklungszusammenarbeit und der politischen Entscheidungsfindung zu implementieren:
1. Verstärkte Nutzung belastbarer Evidenz:
Einbezug von Evidenz in das Projektzyklusmanagement: Die Verwendung vorhandener Evidenz in Project Proposals der Projekt- und Programmmanager sollte verpflichtend werden;
Verbesserung der Zugänglichkeit von Evidenz: Erstellung benutzerfreundlicher Datenbanken für Projektvorschläge, Monitoring- und Evaluierungsdaten und Evaluierungen, einschließlich Forschung durch Dritte (z. B. die IPA Best Bets von 2023) und Empfehlungen von Plattformen Dritter (z. B. 3ie, J-PAL, IPA);
Qualitätskriterien: Bewertung vorhandener Evidenz anhand definierter Qualitätskriterien unter Berücksichtigung methodischer Strenge und kontextueller Relevanz; und
Politikrelevante Evaluierungen: Kombination robuster Evaluierungen mit anderen Analysen, z. B. Kostenanalysen, um eine größere politische Relevanz zu erzielen.
2. Stärkung der robusten Evidenzgenerierung
Mindestquote für rigorose Wirkungsevaluierungen: Festlegung einer Mindestanzahl hochwertiger, rigoroser Wirkungsevaluierungen als Prozentsatz der operativen Ausgaben für alle Projekte, die ein bestimmtes Projektvolumen überschreiten und für alle skalierbaren Pilotprojekte;
Hochwertige Evaluierungsrichtlinien und -standards: Harmonisierung der Evaluationsleitlinien und -kriterien zwischen Außenstellen und Partnern; und
Unterstützung für rigorose Interventionen: Beitrag zu Institutionen, die streng getestete Interventionen skalieren (z. B. Global Innovation Fund).
3. Förderung einer evidenzbasierten Kultur
Kapazitätsaufbau: Verbesserung des Wissens um und der Fähigkeit, belastbare Evidenz durch Mitarbeiter*innen zu generieren, die an Monitoring & Evaluation, der Projekt- und Programmplanung und der Politikgestaltung beteiligt sind;
Unterstützung des Personals: Bereitstellung von Evaluierungs-Helpdesks, die auf spezifische Engpässe und Fragen im Zusammenhang mit Evidenz und rigorosen Wirkungsevaluationen zugeschnitten sind (z. B. wo findet man relevante Evidenz, welche Evidenz ist zu verwenden, wie designet und organisiert man eine Wirkungsevaluierung);
Wissenserhalt: Festsetzung nicht-rotierender Stellen innerhalb von Themen- und Evaluierungsabteilungen, um den Aufbau und die Nutzung professionellen Fachwissens in Bezug auf belastbare Evidenz anzureizen;
Commitment der Führungskräfte: Sicherstellung, dass sich die Führungskräfte für die Priorisierung von Evidenz in der Entwicklungszusammenarbeit und darüber hinaus einsetzen.
Evidenzbasierte Entwicklungszusammenarbeit ist für Regierungen von entscheidender Bedeutung, um Leben zu retten, die Entwicklungszusammenarbeit zu verbessern und die maximale Wirksamkeit der von Steuergeldern finanzierten Programme zu gewährleisten. Politische Maßnahmen, die sich auf belastbare Evidenz stützen, können sicherstellen, dass die Ressourcen dorthin gelenkt werden, wo sie die größte Wirkung erzielen.
Auch wenn es noch Herausforderungen bei der Umsetzung gibt, haben viele staatliche Agenturen der Entwicklungszusammenarbeit bereits erfolgreich Initiativen gestartet, um belastbare Evidenz in die Entscheidungsfindung einzubeziehen. Die Umsetzung der oben aufgeführten empfohlenen Maßnahmen kann zu großen Fortschritten in der Landschaft der Entwicklungszusammenarbeit und zu signifikanten Verbesserungen für diejenigen führen, die sie am dringendsten benötigen.
Comments