Lernportal - Fallstudien
- Bewertung
- Bewertung
- Bewertungsansätze
- Datenmanagement
- Performance Monitoring and Evaluation Framework (Leistungs-, Überwachungs- und Bewertungsrahmen, PMEF)
- Begleitungs- und Bewertungsrahmen
Fallstudien sind ein unverzichtbares Instrument für die detaillierte Erforschung des „Wie“ und „Warum“ von Ergebnissen. Ihre Hauptstärke liegt darin, dass sie einen umfassenden Überblick über eine Intervention in einem realen Umfeld bieten, was besonders dann von Vorteil ist, wenn nur wenige Daten vorliegen oder es sich um komplexe Phänomene handelt.
Page contents
Grundlagen
Auf den Punkt gebracht
Das Wie und Warum verstehen
Fallstudien sind das bevorzugte Instrument der empirischen Bewertung, wenn es um die Beantwortung von Fragen nach dem „Wie“ und „Warum“ geht. Sie ermöglichen eine detaillierte Untersuchung einer Intervention oder eines Programms in einem realen Kontext. In Situationen, in denen es an Daten mangelt, können Fallstudien oft zuverlässigere Erkenntnisse liefern, da sie sich auf mehrere Methoden zur Datenerhebung stützen können.
Die „Success Case-Methode“ beispielsweise identifiziert einzelne Fälle, die besonders erfolgreich (oder erfolglos) waren, und verwendet Fallstudien-Analysemethoden, um glaubwürdige Argumente über den Beitrag der Intervention zu diesen Fällen zu entwickeln.
Fallstudien entstammen mehreren etablierten Traditionen, darunter theoriegestützte Bewertung, Organisationsentwicklung, wertschätzende Untersuchung, narrative Analyse und quantitative statistische Analyse von Wirkungen.
Exemplarische Ergebnisse
Sie können Hypothesen untermauern oder verwerfen und eignen sich aufgrund ihres idiografischen Charakters zur Veranschaulichung oder Erläuterung von Ergebnissen, die bereits hinreichend bestätigt scheinen. In diesem Fall empfiehlt es sich, die Fallstudien auszuwählen und zu starten, sobald die quantitative Analyse durchgeführt wurde und die ersten Ergebnisse vorliegen. Die ersten quantitativen Ergebnisse können nämlich Fragen zu bestimmten Fällen aufwerfen, für die zusätzliche qualitative Informationen erforderlich sind. Mit ihrer Hilfe können die treibenden Faktoren und Ursache-Wirkungs-Beziehungen explizit gemacht und zur Diskussion gestellt werden.
Vor- und Nachteile
Vorteile |
Nachteile |
---|---|
|
|
Wann werden sie eingesetzt?
Fallstudien werden am häufigsten verwendet, um Informationen über die Wirksamkeit einer Intervention oder eines Programms und die Kausalmechanismen zwischen der/den durchgeführten Intervention(en) und den erzielten Wirkungen zu sammeln. Da sie den relativen Einfluss von Faktoren widerspiegeln, die das Erreichen der erwarteten Ergebnisse behindern oder unterstützen, sind Fallstudien daher wertvolle Instrumente zur Bewertung der Effizienz und Relevanz von GAP-Strategieplänen.
Fallstudien sind besonders empfehlenswert:
- Um die Vielfalt der Wirkungen zu verstehen , die durch eine bestimmte Intervention hervorgerufen werden, und die Faktoren, die die erwarteten (theoretischen) Wirkungen in verschiedenen Kontexten fördern oder behindern. Dies ist sehr nützlich, um eine theoriebasierte Analyse zu überarbeiten, indem die verschiedenen kausalen Prozesse hervorgehoben werden, die sich auf andere Arten von Begünstigten auswirken. In diesem Fall wird empfohlen, Fallstudien auszuwählen, die für die verschiedenen Kontexte repräsentativ sind und die Ergebnisse widerspiegeln können, die durch einen GAP-Strategieplan in verschiedenen Situationen erzielt werden, z. B. können die Ergebnisse je nach den Merkmalen der Begünstigten (Standort, Betriebstyp, Größe usw.) von unterschiedlicher Art und/oder Größenordnung sein. Es wird daher empfohlen, eine Klassifizierungsanalyse durchzuführen, um repräsentative Gruppen von Begünstigten zu ermitteln, aus denen (einzelne oder mehrere) Fälle für eine detaillierte Bewertung der politischen Ergebnisse ausgewählt werden.
- Betrachtung der Gesamtwirkungen eines gesamten GAP-Strategieplans (d. h. mehrerer Interventionen) im Vergleich zu einem bestimmten Ziel oder Element. Hier kann der Ansatz darin bestehen, verschiedene Beispiele von Projekten oder Praktiken auszuwählen, die durch verschiedene Interventionen unterstützt werden, z. B. die Bewertung der Auswirkungen eines GAP-Strategieplans auf das Tierwohlbefinden. Dies kann veranschaulichen, wie verschiedene GAP-Interventionen zur Unterstützung verbesserter Unterbringungs- und Haltungsbedingungen von Betrieben in anderen Zielsektoren umgesetzt wurden. Für jede Intervention können ein oder mehrere Beispiele den Betriebskontext, die Umsetzung der geförderten Praxis oder Investition, die an den Betrieb gelieferte Menge, die erwartete Wirkung auf das Tierwohlbefinden, die aufgetretenen Schwierigkeiten, unerwartete Folgen der Politik usw. beschreiben.
Ein anderer Ansatz besteht darin, Gebiete oder Sektoren mit unterschiedlichen Fragestellungen zu vergleichen und die Auswirkungen eines GAP-Strategieplans auf spezifische Ziele in bestimmten Kontexten zu unterscheiden. Um die Auswirkungen eines GAP-Strategieplans auf die Wasserversorgung zu bewerten, könnten beispielsweise Flussgebietseinheiten betrachtet werden, um zu untersuchen, wie die durchgeführten GAP-Maßnahmen dazu beigetragen haben, den Druck auf die Wasserversorgung aus landwirtschaftlichen Quellen zu mindern. Zusätzliche Informationen können von besonderem Interesse sein (z. B. Ergebnisse von Wasseranalysen über verschiedene Zeiträume), um das Gesamtbild zu vervollständigen.
Voraussetzungen
- Gute Kenntnis der Begünstigten des Programms, ihrer geografischen Verteilung und ihrer wirtschaftlichen Lage.
- Vorhandensein von guten Beispielen, die als repräsentative Fälle ausgearbeitet werden können.
- Gewisse statistische Kenntnisse zur Anwendung spezifischer Techniken zur Auswahl repräsentativer Fälle auf der Grundlage der Verarbeitung quantitativer Daten.
- Gute Schreibtechniken für Fallstudien.
Schritt-für-Schritt-Anleitung
-
Schritt 1 - Definition des Ansatzes für Fallstudien: Bei der Verwendung von Fallstudien ist es wichtig, die geeigneten Analyseebenen zu bestimmen, die mit dem Ziel der Bewertung übereinstimmen. Die Analyseebene kann je nach Ziel der Bewertung variieren und je nachdem, ob Fallstudien darauf abzielen:
- Beispiele für die Umsetzung eines GAP-Strategieplans zu veranschaulichen;
- die Leistung verschiedener GAP-Interventionen zu vergleichen;
- die in einem bestimmten Maßstab erzielte Wirksamkeit zu bewerten;
- spezifische Informationen zu einem bestimmten Thema zu sammeln.
Der folgende Rahmen kann dabei helfen, den Ansatz der Fallstudien entsprechend dem jeweiligen Umfang, der Analyse und der Reichweite einer Bewertung zu gestalten.
-
Die Abbildung zeigt, wie der Ansatz einer Fallstudie aussehen kann, indem sie den Maßstab darstellt, der entweder Begünstigte/Projekte oder Sektoren/Gebiete sein kann, und zweitens den Umfang, der entweder eine einzelne Intervention oder mehrere Interventionen/Programme/Politiken umfasst.
Der Rahmen ist in vier Quadranten unterteilt, die sich aus den Überschneidungen dieser Kategorien ergeben:
Erstens: Begünstigte/Projekte auf der Ebene einer einzelnen Intervention; zweitens: Begünstigte/Projekte auf der Ebene mehrerer Interventionen/Programme/Politiken; drittens: Sektoren/Gebiete auf der Ebene einer einzelnen Intervention; und viertens: Sektoren/Gebiete auf der Ebene mehrerer Interventionen/Programme/Politiken.
Die Anzahl und Vielfalt der Fälle kann je nach dem Ziel der Bewertung variieren. Die Anzahl der Fallstudien hängt von der Vielfalt der Situationen ab, die zum besseren Verständnis des Phänomens dargestellt werden müssen. Die Anzahl der Fallstudien ergibt sich jedoch auch aus den verfügbaren Ressourcen (z. B. Budget und Zeit) und dem Ausmaß, in dem eine umfassende Analyse erforderlich ist, um die Komplexität einer Situation wiederzugeben. Dies ermöglicht es, sich auf einige wenige repräsentative Situationen und nicht auf alle bestehenden Situationen zu konzentrieren.
Abgesehen von der Anzahl und der Art der ausgewählten Fälle sollte auch der Zeitplan für ihre Durchführung entsprechend dem methodischen Ansatz festgelegt werden. Fallstudien können eine explorative Funktion haben und zu Beginn eines Bewertungsprozesses durchgeführt werden oder eine bestätigende/erklärende Funktion haben. In letzterem Fall können sie geplant werden, sobald die Informationen über die beobachteten Wirkungen (Outputs, Ergebnisse oder Auswirkungen) verarbeitet wurden, um die Ergebnisse der quantitativen Analyse weiter zu untersuchen und zu ergänzen.
- Schritt 2 - Auswahl der Fälle: Die Auswahl der Fallstudien spielt bei einer Bewertung eine entscheidende Rolle. Daher müssen die Fälle entsprechend dem methodischen Ansatz und dem erwarteten Beitrag zu einer Bewertung mit größter Sorgfalt ausgewählt werden.
So ermöglicht die Auswahl von Fallstudien, die für die Realität (und die ihr innewohnende Vielfalt) repräsentativ sind, ein umfassendes Bild einer Situation. Sie begünstigt auch die Verallgemeinerung von Ergebnissen aus Fallstudien. Andererseits kann die Auswahl von Einzelfällen, die besonders erfolgreich und/oder erfolglos waren, dazu beitragen, Faktoren zu ermitteln, die die Ergebnisse einer Politik unterstützen oder behindern.
Unabhängig von der Einheit der Fallstudien (z. B. Begünstigte, Projekte, Gebiete usw.) hilft die Aufstellung einer Klassifizierung bei der Ermittlung der relevanten Kriterien oder Indikatoren für die Auswahl der Fallstudien. Die Auswahl spiegelt jedoch auch die Informationen wider, die für die Bewertung von besonderem Interesse sind und die in verschiedene Kategorien eingeteilt werden können. Beispiele für Kriterien für die Auswahl der Fallstudien sind die Ausführungsebene (Output), die Leistungsebene (Ergebnisse), der geografische Standort, die Sektoren und kontextbezogene Informationen.
- Schritt 3 - Berücksichtigung des Umfangs und des Inhalts der Studie: Fallstudien können je nach den Zielen einer Bewertung unterschiedliche Arten von Informationen und Analysen enthalten. So kann beispielsweise der beschreibende Hintergrund einer Fallstudie quantitative Informationsquellen und Methoden mobilisieren. Im Gegensatz dazu können die Grundprinzipien der Politik, die Gründe für die Umsetzungsentscheidungen, die beobachteten Auswirkungen und die Identifizierung externer Faktoren, die die Wirksamkeit der Politik beeinflussen, durch ausführliche Interviews mit den wichtigsten Interessenvertretern, ergänzt durch eine Literaturübersicht, untersucht werden.
- Schritt 4 - Erarbeitung der Ergebnisse: Fallstudien dienen als Informationsquelle für den Bericht über die Bewertung. Daher werden die in den Fallstudien gesammelten Fakten extrahiert, zusammengestellt und für die Analyse im Hauptbericht verwendet.
Es ist jedoch notwendig, die interne und externe Validität der Ergebnisse der Fallstudien zu bewerten und zu prüfen, inwieweit sie für andere Situationen extrapoliert oder verallgemeinert werden können (oder nicht). Zu den nützlichen Fragen gehören:
- Bestätigen die empirischen Ergebnisse der Fallstudien tendenziell die zu Beginn der Bewertung festgelegten theoretischen Annahmen (theoriebasierte Analyse)?
- Gab es mehrere Fallstudien, die ähnliche Ergebnisse zeigten und die logische Argumentation bestätigten?
Wichtigste Punkte zum Mitnehmen
- Fallstudien sind wichtig, wenn es darum geht, komplexe sozioökonomische Auswirkungen und Kausalitäten zu verstehen.
- Sie bieten eine fundierte, zuverlässige Momentaufnahme in Szenarien, in denen nur wenige Daten vorliegen.
- Die Erfolgsfallmethode ist entscheidend für die Isolierung und Analyse besonders erfolgreicher oder erfolgloser Fälle.
- Fallstudien sind vielseitig und sowohl bei qualitativen als auch bei quantitativen Bewertungen nützlich.
- Sie bieten einzigartige Einblicke in die Wirksamkeit, Effizienz und Relevanz von Interventionen, insbesondere im Rahmen des GAP-Strategieplans.
Aus der Praxis lernen
Assessing RDP Achievements and Impacts in 2019
- Publikation: Lattanzio KIBS SpA (Virgilio Buscemi, Paola Paris, Silvia De Matthaeis und andere), 2022
Dritter thematischer Bewertungsbericht „Innovation in der Landwirtschaft – Die strategischen Pläne der Operationellen Gruppen“. - Arfini, F., Brasili, C., Fanfani, R. et al. (2001)
Instrumente zur Bewertung der EU-Agrarpolitik: Ein integrierter Ansatz. Statistische Methoden und Anwendungen 10, 191-210.
Gagnon, Y.-C. (2012)
Die Fallstudie als Forschungsmethode, 2. Auflage. University of Quebec Press.
Yin, R. K. (2018).
Fallstudienforschung und Anwendungen: Design und Methoden (6th ed.). Sage Publikationen.
Weiterführende Literatur
Leitlinien: Bewertung des AKIS-Strategieansatzes in GAP-Strategieplänen
- Europäisches Evaluierungsnetzwerk für ländliche Entwicklung für die GAP (2014)
Den Erfolg Ihres EPLRs erfassen: Leitlinien für die Ex-post-Evaluierung der EPLRs 2007-2013.