Evaluationspraxis - Professionalisierung - Ansätze - Methoden

Buchtitel

Vorwort zur 2. Auflage

Inhalt

Evaluationspraxis reflektieren – Einleitung und Überblick (Susanne Giel/Katharina Klockgether/Susanne Mäder)

Die Rolle von Univation als fachlicher Bezugspunkt

Zum Aufbau des Buches

Hinweis für Leserinnen und Leser

Literatur

Beitrag zu einer konsistenten Evaluationsterminologie –das Glossar von Univation (Melanie Niestroj/Wolfgang Beywl/Berthold Schobert)

1. Babylon ist überall

2. Zielsetzung des Beitrags

3. Entstehung des Eval-Wiki: Glossar der Evaluation

4. Nutzung des Glossars

5. Ausblick und Einladung zur Mitarbeit

Literatur

Checklisten zur Planung und Steuerung von Evaluationen (Katharina Klockgether)

1. Welche Arten von Checklisten gibt es?

2. Beispiele von Checklisten

3. Wie verbreitet sind Checklisten?

4. Was sind die Vorteile und Tücken von Checklisten?

5. Welche Eigenschaften hat eine gute Checkliste?

6. Fazit und Ausblick

Literatur

Informationssicherheit in der Evaluation (Marc Jelitto)

1. Welche Gefahren Expertenteams sehen:

2. Welche Informationen bei Evaluationen in Gefahr sind:

3. Welche Ziele beim Informationsschutz verfolgt werden:

4. In welchen Bereichen ein Schutz besonders wichtig ist:

5. Welche Faktoren eine wichtige Rolle spielen:

6. Grundlegende Praxisvorschläge für den Evaluationsalltag

7. Grundlegender Schutz der Computer

8. Vertiefte strategische Sicherheit

Literatur

Interkulturelle Kompetenz – ein weiterer Bausteinfür das professionelle Handeln in Evaluationen (Schahrzad Farrokhzad)

Kompetenzanforderungen an Evaluatorinnen und Evaluatoren – Vorbemerkungen

1. Interkulturelle Kompetenzen – hilfreich in der Evaluation?

1.1 Anforderungen interkultureller Kompetenzentwicklung – Mikroebene

1.2 Anforderungen interkultureller Kompetenzentwicklung – Mesoebene

1.3 Anforderungen interkultureller Kompetenzentwicklung – Makroebene und globale Ebene

2. Fazit

Literatur

Schwarm-Evaluation als Steuerungsansatz (Dörte Schott und Wolfgang Beywl)

1. Intelligenz und Kreativität von Schwärmen

2. Fallbeispiel: Herausforderungen, Antwort und gewonnene Erkenntnisse

2.1 Kontext

2.2 Durchgeführte Evaluationen

2.3 Kollaboration als Antwort auf die Herausforderungen

2.4 Gewonnene Erkenntnisse

3. Analyse: Der Schwarm-Evaluations-Ansatz (SEA)

4. Diskussion: Möglichkeiten und Grenzen des SEA

5. Fazit und Ausblick

Literatur

Der Programmbaum als Evaluationsinstrument (Samera Bartsch/Wolfgang Beywl/Melanie Niestroj)

1. Zielsetzung des Beitrags

2. Entstehungshintergrund des Programmbaums

3. Die Elemente des Programmbaums

4. Nutzen des Programmbaums

4.1 Nutzen für Programmverantwortliche (bzw. die Programm- und Maßnahmenplanung)

4.2 Nutzen für Evaluierende

4.3 Nutzen für die Meta-Evaluation

5. Diskussion des Modells ‚Programmbaum‘ in Theorie und Praxis

6. Schlussbemerkung

Literatur

Wirkungen auf der Spur mit Programmtheorien (Susanne Giel)

1. Die Herausforderung der Wirkungsfeststellung

2. Programmtheorie und theoriebasierte Evaluation

3. Theoriebasierte Evaluation von Modellprojekten zur Prävention von Rechtsextremismus, Antisemitismus und Rassismus

3.1 Phase 1: Sampling

3.2 Phase 2: Wirkannahmen aus Sicht der Projektdurchführenden rekonstruieren

3.3 Phase 3: Wirkungen aus Sicht der Zielgruppen überprüfen

3.4 Phase 4: Wirkannahmen kommunikativ validieren

3.5 Phase 5: Vergleichende Analyse

4. Reflexion des theoriebasierten Evaluationsansatzes vor dem Hintergrund der praktischen Erfahrungen

Literatur

Developmental Evaluation nach Michael Patton. Begriffsbestimmung und Reflexion der praktischen Anwendung (Maria Gutknecht-Gmeiner)

1. Developmental Evaluation

1.1 Entstehung (‚Wie kam es zu DE?‘)

1.2 Definition von Developmental Evaluation (‚Was ist DE?‘)

1.2.1 Evaluationszweck: ? Entwicklung

1.2.2 Komplexität des Evaluationsgegenstands

1.3 Umsetzung von Developmental Evaluation (‚Wie geht DE?‘)

2. Developmental Evaluation von ‚Computer-Science-Management‘

2.1 Computer-Science-Management – ein innovatives Ausbildungsprogramm

2.2 Grundlegende Parameter der Evaluation

2.3 Eignung für Developmental Evaluation

2.4 Koevolutionäre Umsetzung

2.5 Design und Methoden

2.6 Nutzung und Nutzen

3. Reflexion und Ausblick

3.1 Beitrag von Developmental Evaluation

3.2 Voraussetzungen

3.3 Herausforderungen

3.4 Offene Fragen und Ausblick

Literatur

Nutzen einer wirkungsorientierten Zielsystematik. Bindeglied zwischen Evaluation und Programmsteuerung (Stefan Schmidt)

1. Die wirkungsorientierte Zielsystematik

1.1 Hierarchische Ordnung von Zielen

1.2 Entwicklung von Outcome-Zielen

1.3 Differenzierung von Zielgruppen

2. Wirkungsorientierung in der Evaluation und in der Programmsteuerung

Literatur

Der Umgang mit Monitoring in der Evaluation (Katharina Klockgether)

1. Monitoring und Evaluation: Was ist das?

2. Verhältnis der Evaluation zu Monitoring

3. Outputmonitoring und Bedingungsmonitoring im Rahmen der Evaluation von EQUAL-Entwicklungspartnerschaften

4. Output-, Outcome- und Impact-Monitoring im Förderprogramm IQ

4.1 Der Weg zum Monitoring-Instrument

4.2 Der Einsatz des Monitoring-Instruments im Förderprogramm IQ

5. Herausforderungen bei der Entwicklung von Monitoring-Instrumenten in einer Programmevaluation

6. Was Evaluierende im Zusammenhang mit Monitoring beachten sollten

7. Vorhandene Monitoringdaten nutzen

8. Übergreifendes Fazit

Literatur

Interviews mit Jugendlichen. Herausforderungen in der Planung und Umsetzung (Matthias Sperling)

1. Allgemeine Herausforderungen qualitativer Interviews

2. Die Zielgruppe ‚Jugendliche‘ als Herausforderung

3. Zugang und Erreichbarkeit der Jugendlichen

4. Die Sprache in Interviews mit Jugendlichen

5. Das Verhalten von Jugendlichen in Interviews

6. Die Wahl einer passenden Interviewform

7. Der Ablauf des Interviews

8. Leitfäden zur Interviewgestaltung

9. Die Dokumentation von Interviews

10. Datenschutz und Einverständnis

11. Die Interviewatmosphäre/-situation

12. Die Reflexion der Interviewsituation

13. Die Kommunikation mit den Jugendlichen im Anschluss an die Interviews

Literatur

Mit Gruppendiskussionen kollektive Orientierungen rekonstruieren (Ute B. Schröder )

1. Die Gruppendiskussion – eine Methode der Datengewinnung aus der Sozialforschung

2. Historischer Kontext und methodologischer Hintergrund zum Verständnis des Kollektiven

3. Die Aktualisierung kollektiver Orientierungen in Gruppendiskussionen

4. Zwei Arten des Verstehens: konjunktiv und kommunikativ

5. Die Analyse von Gruppendiskussionen – Rekonstruktion von implizitem und explizitem Wissen und kollektiven Orientierungen

6. Bewertung und Werthaltung

7. Schlussbemerkungen

Literatur

Die Anwendung der Grounded Theory in Evaluationen (Marianne Lück-Filsinger)

1. Grundlagen der Grounded Theory

2. Die Grounded Theory in Anwendung: eine Evaluationsstudie

2.1 Evaluation der Übergangsgestaltung vom Kindergarten in die Grundschule: Kontext und Gegenstand des Auftrags

2.2 Theoretical Sampling

3 Kodieren in der Praxis einer Evaluation

3.1 Das Offene Kodieren: Finden von Konzepten und erste Ideen für Kategorien

3.2 Das Axiale Kodieren zur Herstellung von Verbindungen zwischen den Kategorien

3.3 Selektives Kodieren: die Generierung einer gegenstandsbezogenen Theorie

4. Fazit

Literatur

Evaluation und das Web (Elitsa Uzunova)

1. Wie das Web die (Evaluations-)Welt verändert

2. Neue Optionen für Evaluationen

2.1 Bei der Datenerhebung

2.1.1 Neue Chancen zur Datengenerierung

2.1.2 Neue Herausforderungen in der Datengenerierung

2.2 Bei der Datenauswertung

2.2.1 Neue Möglichkeiten der Datenauswertung

2.2.2 Neue Herausforderungen in der Auswertung

2.3 Bei der Präsentation von Ergebnissen

2.3.1 Neue Möglichkeiten bei der Präsentation von Evaluationsergebnissen

2.3.2 Neue Herausforderungen bei der Präsentation von Evaluationsergebnissen

3. Konsequenzen der Web-Technologien für die Professionalisierung von Evaluierenden

3.1 Neue Vernetzungs-/Wissenstransferoptionen für die Evaluationscommunity

3.2 Neue Herausforderungen für die Evaluationscommunity

4. Fazit – Ausblick

Literatur

Bewertungsverfahren in der Evaluation. Vorgehensweisen und Praxisbeispiele (Susanne Mäder)

1. Bewerten, aber wie?

2. Umgang mit Bewertung in Theorie und Praxis

3. Zentrale Schritte und Begriffe von Bewertung

4. Wirkmodelle als Ausgangspunkt für Bewertungskriterien

5. Ermittlung von Erfolgspunkten zur Resultatsbewertung

6. Schlussfolgerungen

Literatur

Autorinnen und Autoren

Index