Sozialpolitische Innovation ermöglichen - Die Entwicklung der rekonstruktiven Programmtheorie-Evaluation am Beispiel der Modellförderung in der Kinder- und Jugendhilfe

Buchtitel

Inhalt

1. Problemstellung, Ziele und Aufbau der Arbeit

1.1 Ziele der Arbeit und Untersuchungsaufgaben

1.2 Fragestellung, Hintergrund und Kontextinformationen

1.3 Kurzbeschreibung der einzelnen Kapitel

2. Evaluation von Programmen

2.1 Wissenschaft, Bewertung und Nutzung: Evaluation im Spannungsfeld unterschiedlicher Erfordernisse

2.1.1 Definition von Evaluation – eine erste Annäherung

2.1.2 Begründung einer gegenstandsbezogenen Begriffsklärung

2.1.3 Wissenschaft, Bewertung und Nutzung: Situierung im evaluationstheoretischen „Koordinatensystem“

2.2 Programmevaluation: Die theoretische Perspektive der Evaluation auf den Untersuchungsgegenstand

2.2.1 Programme – eine breite Vielfalt

2.2.2 Programme als Evaluationsgegenstand: Eine Heuristik der Evaluation

2.3 Weichenstellungen für das Evaluationsdesign

2.3.1 Produktevaluation – Grenzen und Anregungspotenzial

2.3.2 Evaluation von Personen und was man aus ihren Problemen lernen kann

2.3.3 Evaluation von Organisationen: Eine andere Perspektive der Untersuchung

2.3.4 Die Programmheuristik und ihre theoretischen Vorannahmen

3. Bundesmodellprogramme als innovative multizentrische Programme: Merkmale und Anforderungen an die Evaluation

3.1 Modellprogramm als politisches Instrument

3.1.1 Bundesmodellprogramme in der Kinder- und Jugendhilfe

3.1.2 Übertragbarkeit der Ergebnisse und wissenschaftliche Begleitung

3.2 Veränderungen in den Zuschnitten von Modellvorhaben und Begleitforschung: Von der wissenschaftlichen Begleitung zur Evaluation

3.2.1 Modellförderung der Kinder- und Jugendhilfe im „(Wind-)Schatten“ der Bildungsreformen

3.2.2 Begleitforschung im Spannungsfeld zwischen Kontroll- und Handlungsforschung

3.2.3 Übergänge zur Evaluation

3.2.4 Evaluation und Begleitforschung: Gemeinsamkeiten und Unterschiede

3.3 Zwei Beispiele: Die Bundesmodellprogramme „Mobile Jugendsozialarbeit“ und „Interkulturelles Netzwerk“

3.3.1 Das Bundesmodellprogramm „Mobile Jugendsozialarbeit“

3.3.2 Das Bundesmodellprogramm „Interkulturelles Netzwerk“

3.4 Besonderheiten von Bundesmodellprogrammen als Evaluationsgegenstand – innovativ, emergent, heterogen,multizentrisch und „modellhaft“

3.4.1 Bundesmodellprogramme als innovative Programme

3.4.2 Bundesmodellprogramme als emergente Programme

3.4.3 Bundesmodellprogramme als multizentrische und heterogen implementierte Programme

3.4.4 Bundesmodellprogramme als Mehrebenen- und Multiakteursprogramme

3.4.5 Bundesmodellprogramme als modellhafte Erprobung zur Gewinnung übertragbarer Erkenntnisse – die Aufgaben der Evaluation

3.5 Herausforderungen für die Programmevaluation – eine Zusammenfassung

4. Übertragung der Cluster-Evaluation auf die Evaluation von Bundesmodellprogrammen

4.1 Hintergrund und Kontext der Cluster-Evaluation

4.1.1 „Multisite evaluations“ – eine erste Systematisierung multizentrischer Evaluationen

4.1.2 Cluster-Evaluation als Gegenentwurf zur „multisite evaluation“

4.1.3 Förderprogramme der WKKF als Gegenstand der Cluster-Evaluation

4.2 Konzeptionelle Merkmale der Cluster-Evaluation

4.2.1 Die „vier Schlüsselmerkmale“ der Cluster-Evaluation – programmatische Eckwerte der W.K. Kellogg Foundation

4.2.2 Sechs Gestaltungsmerkmale der Cluster-Evaluation – ein Systematisierungsvorschlag

4.3 Anwendbarkeit auf andere Kontexte: Cluster-Evaluation als „Stiftungs-Evaluationsmodell“ oder übertragbarer Evaluationsansatz?

4.3.1 Ein Evaluationsansatz – viele mögliche Evaluationsdesigns

4.3.2 Cluster-Evaluation und ihr Ausgangspunkt als „Stiftungs-Evaluationsmodell“

4.3.3 Verbreitung der Cluster-Evaluation über die W.K. Kellogg Foundation hinaus

4.4 Die impliziten Programmannahmen der Cluster-Evaluation als konzeptionelles Kernelement des Evaluationsansatzes

4.4.1 Ansätze multizentrischer Evaluation

4.4.2 Typologisierung multizentrischer Ansätze nach den Kriterien von Sinacore und Turpin

4.4.3 Die impliziten Annahmen über die Programmarchitektur als Unterscheidungskriterium multizentrischer Evaluationszugänge

4.4.4 Theoretische Annahmen der Cluster-Evaluation über das Programm und seine „Architektur“

4.4.5 Differenzen in den Programmarchitekturannahmen multizentrischer Evaluationsansätze

4.4.6 Zwischenfazit: Cluster-Evaluation als übertragbarer Evaluationsansatz und „onsite evaluation“ als eine Alternative

4.5 Erfahrungen aus der Übertragung der Cluster-Evaluation auf Bundesmodellprogramme

4.5.1 Evaluative Fallstudien und responsive Evaluation als Ausgangspunkte der Studie „Mobile Jugendsozialarbeit“

4.5.2 Konzeptübergang zur Cluster-Evaluation

4.5.3 Erfahrungen mit dem Ansatz der Cluster-Evaluation in zwei Evaluationsstudien

4.6 Zusammenfassung und Resümee zur Übertragbarkeit der Cluster-Evaluation in andere Kontexte

5. Entwicklung einer Konzeption rekonstruktiver multizentrischer Programmtheorie-Evaluation

5.1 Programmtheorie-Evaluation zwischen Generalisierungsanspruch und Nutzungsorientierung – oder: Empirisch begründete Theorieentwicklung als weißer Fleck?

5.1.1 Programmtheorie-Evaluation: Unterschiedliche Zugänge und evaluationstheoretische Entwicklungslinien

5.1.2 Empirisch begründete Theorieentwicklung als weißer Fleck programmtheoriebasierter Evaluationszugänge

5.1.3 Herausforderungen für ein programmtheoriebasiertes Vorgehen in der Cluster-Evaluation

5.2 Von der Programmtheorie als „konstitutiver Bestandteil“ eines Programms zur Beschreibung des Untersuchungsgegenstandes

5.2.1 Programmtheorie – ein mehrdeutiger Begriff

5.2.2 Programmtheorie: Die theoretische Beschreibung des Untersuchungsgegenstandes in einer Evaluation

5.2.3 Konsequenzen für ein programmtheoriebasiertes Vorgehen der Cluster-Evaluation

5.3 Programmtheorien auf drei „Ebenen“ der Cluster-Evaluation: Programmkonzeption, Handlungskonzepte der Projekte und fachliche Strategien

5.3.1 Programmtheorie auf der Beobachtungsebene der Programmkonzeption

5.3.2 Programmtheorien auf der Beobachtungsebene der Projektaktivitäten

5.3.3 Programmtheorien modellhaft erprobter fachlicher Strategien

5.4 Programmtheorien als Repräsentationen professionellen berufsfeldspezifischen Wissens

5.4.1 Innovative Handlungskonzepte und sozialpädagogisches Wissen

5.4.2 Sozialpädagogische Wissensformen und ihre Berücksichtigung in Konzepten der Programmtheorie

5.5 Programmarchitekturtheorie: Das fehlende Bindeglied einer Verknüpfung von Cluster-Evaluation mit programmtheoriebasierter Evaluation

5.5.1 Programmarchitekturtheorie – die theoretische Beschreibung der wechselseitigen Bezüge von Programm und Projekten

5.5.2 Rekursive Programmarchitekturtheorie und Sortierung vielfältiger Programmtheorien

5.5.3 Programm-Makrotheorie: Wie soziale Veränderungen ermöglicht werden

5.6 Schlüsselkonzepte rekonstruktiver multizentrischer Programmtheorie-Evaluation oder programmtheoriebasierter Cluster-Evaluation

6. Methodisches Vorgehen in zwei Studien: Programm-Modelle als heuristische Instrumente und ExpertInneninterviews zur Rekonstruktion fachlicher Strategien

6.1 Vom Fall zur fallübergreifenden Strategie: Übergang zu einem programmtheoriebasierten Vorgehen in der Studie „Mobile Jugendsozialarbeit“

6.1.1 Vorgehen in der ersten Hälfte der Evaluationslaufzeit

6.1.2 Anknüpfungspunkte für den Übergang zu einer Programmtheorie-Evaluation

6.1.3 Grundlegende Veränderungen des Evaluationsdesigns

6.2 Ereigniskette als Auswertungsheuristik

6.2.1 Die Ereigniskette nach Bennett als strukturiertes Schema zur Abbildung der Programmtheorie

6.2.2 Ereignisketten im Bundesmodellprogramm „Mobile Jugendsozialarbeit“

6.2.3 Ereigniskette als heuristisches Instrument der Cluster-Evaluation

6.3 Programm-Modelle als heuristische oder praktische Instrumente der Evaluation – zwei zu unterscheidende Konzeptionen

6.4 Programm-Modelle in der Evaluationsstudie „Interkulturelles Netzwerk“

6.4.1 Das „logische Modell“ als Instrument der Evaluation

6.4.2 Verwendungsformen des „logischen Modells“ in der Evaluationsstudie „Interkulturelles Netzwerk“

6.4.3 Ereigniskette und Veränderungsmatrix als Auswertungsheuristiken

6.5 Programmtheorie-rekonstruierende ExpertInneninterviews: Berufsfeldspezifisches (Deutungs-)Wissen als Untersuchungsgegenstand

6.5.1 Professionelles berufsfeldspezifisches Wissen und Expert(inn)enwissen

6.5.2 Handlungsrelevante „Programmtheorien“ als Deutungswissen von Expert(inn)en

6.5.3 Zur Explizierbarkeit handlungsrelevanten Wissens und zur Praxisrelevanz der Rekonstruktionen fachlichen Handelns

6.6 Durchführung und Auswertung programmtheorierekonstruierender ExpertInneninterviews

6.6.1 Förderung erzählender Darstellungen der fachlichen Handlungspraxis – zur Gestaltung der Eingangssequenzund der Evaluationssituation

6.6.2 Die Rolle der Befragenden

6.6.3 Auswahl der Expert(inn)en und die Organisation des Interviews

6.6.4 Aufbau der ExpertInneninterviews

6.6.5 Auswertungsschritte

7. Evaluation innovativer Entwicklungsprogramme – einige Thesen

Nachwort: Einige Worte des Dankes und wenige Worte zum Schluss

Literaturverzeichnis