Evaluationsforschung - Grundlagen und ausgewählte Forschungsfelder

Buchtitel

Inhalt

Vorworte

Vorwort zur 3. Auflage

Vorwort zur 2. Auflage

Vorwort zur 1. Auflage

Evaluation in Deutschland (Reinhard Stockmann)

1. Evaluation, was ist das?

2. Theorien und Methoden der Evaluationsforschung

3. Entwicklung der Evaluationsforschung

3.1 Entwicklung in den USA

3.2 Entwicklung in Europa

3.3 Entwicklung in Deutschland

4. Evaluationsdefizite und Professionalisierungsversuche

5. Anforderungen an die Evaluation in Deutschland

Literatur

Institutionalizing Evaluation in the United States of America (Donna M. Mertens)

1. Definitions

2. History

3. Associations, Standards, Guiding Principles, and Journals of Evaluation

4. Current Influences on Evaluation in the United States

5. Theoretical Challenges in the Current Environment

6. Questions remaining

References

Evaluation in Europe (Frans L. Leeuw)

1. Introduction

2. Evaluation still an infant industry in Europe?

2.1 Indicators

2.2 Evaluation societies

2.3 A survey amongst evaluation providers

3. Evaluation and the European Union

3.1 A little history

3.2 Management Reforms and Evaluation in the 90’s

3.3 Towards Systematic Evaluation of All Community Policies

3.4 Evaluation of European Expenditures: State of Play in 1999

4. Current developments

4.1 The importance of civil society is increasing

4.2 Strengthening public management

4.3 The ‚Polity‘ and different political traditions

4.4 Central topics for evaluation within Europe

5. The future

References

Qualität der Evaluation – Wenn Wissenschaft zur praktischen Kunst wird (Thomas Widmer)

1. Einstieg

2. Vielfältige Evaluation

2.1 Gegenstände der Evaluation

2.2 Verortung einer Evaluation

2.3 Methodenpluralismus

2.4 Distanz und Umfang einer Evaluation

3. Erwartungen an eine Evaluation

3.1 Interaktionstheoretisches Modell

3.2 Interaktion Politik und Verwaltung – Evaluation

3.3 Interaktion Wissenschaft – Evaluation

3.4 Interaktion Öffentlichkeit – Evaluation

3.5 Zusammenfassung

4. Referenzebenen der Evaluationsqualität

5. Standards der Evaluation

5.1 Entstehung der Standards

5.2 Struktur und Inhalt der Standards

6. Anwendung der ‚Standards‘ in der Evaluationspraxis

6.1 Vorbemerkungen

6.2 Meta-Evaluation

6.3 Ratgeber für die Evaluationspraxis

6.4 Qualitätssicherung

6.5 Didaktisches Hilfsmittel in Aus- und Weiterbildung

6.6 Adaption durch Fachgesellschaften

6.7 Standards in Rechtstexten und Handbüchern

7. Schluß

Literatur

Evaluation Research and Fundamental Research (Evert Vedung)

1. The Problem: Differences Between Evaluation and Fundamental Research?

2. Scheme of Analysis: the Eight Problems Approach to Public Policy Evaluation

3. Is There a Difference With Respect to Valuing?

4. Primary and Essential Difference: Evaluation Should Be Useful and Used

5. What Kinds of Evaluation Uses Are There?

6. Importance of the Contract

7. Accountability and Improvement Purposes Are Vital to Evaluation

8. Basic Knowledge as a Happy Side-effect in Evaluation

9. Evaluation as Potemkin villages

10. Strategies to Tackle the Utilization Issue in Evaluation

11. Final Word

References

Theories of Evaluation (Barbara Lee)

1. Introduction

2. The activity of evaluation

3. Evaluation theory emerges

4. Evolutionary forces shaping evaluation theory

5. What is “evaluation theory”?

6. The knowledge component: What counts as acceptable and credible evidence about programs?

7. Where the transdisciplines of statistics and evaluation meet

8. The cold war in evaluation

9. Value – what kind, how much, to whom, and under what conditions?

10. Who cares?! The component of Use

11. Practice: What do we do, under what contingencies, and how do we do it?

12. Social programming: For whose good? Who benefits, and who is harmed?

13. Theoretical Common Ground in the Discipline of Evaluation

14. Conclusion

References

Methodology: Building Bridges to Knowledge (Valerie J. Caracelli)

1. Introduction

2. Framing Questions

3. Building In Quality

4. Creating the Evaluation Design

5. Analytic Frameworks

6. Evidence base

7. Enhancing Credibility, Meaning, and Utility with Multiple and Mixed-methods

References

Evaluation und Verwaltungspolitik. Konzepte und Praxis in Deutschland und iminternationalen Kontext (Hellmut Wollmann)

1. Konzeptionelle und methodische Eigentümlichkeiten der Evaluation von Verwaltungspolitik

1.1 Die mehreren „Schleifen“ von Evaluation

1.2 Methodenprobleme

1.2.1 Konzipierungsproblem

1.2.2 Kausalitätsproblem

1.2.3 Quasi-Evaluation

1.3 Zeitpunkt und Modalität der Evaluation

1.4 Träger der Evaluation

2. Verwaltungspolitik und Evaluation in Deutschland

2.1 Ansätze interner Evaluation

2.2 Ansätze externer Evaluation

2.3 Evaluation und Verwaltungspolitik im internationalen Überblick

3.1 Ansätze interner Evaluation

3.2 Ansätze externer Evaluation

4. Evaluation in der Verwaltungspolitik – eine „dritte Welle“ von Evaluation?

Literatur

Qualität und Evaluation im System Hochschule (Helmut Kromrey)

1. „Evaluation“ – Begriff und Funktionen

2. Evaluation im System Hochschule – wie und wozu?

3. Welches „Paradigma“ der Evaluation ist das beste?

4. Der Ausweg: Evaluation durch Umfrageforschung

5. Andere Formen des Einsatzes von Befragungen und Erhebungen

6. Zu guter Letzt: Qualitätsentwicklung ohne Qualitätsbegriff?

Literatur

Qualitätsevaluation und Schulentwicklung (Xaver Büeler)

1. Begriffliche Klärung

2. Zur Entstehung der Qualitätsevaluation in Schulen

2.1 School Effectiveness Research

2.2 Schulqualitätsforschung in deutschsprachigen Ländern

2.3 Von der Schulforschung zum Qualitätsmanagement in Schulen

3. Systematische Herleitung

3.1 Die Lernende Schule

3.2 Qualität evaluieren und entwickeln

3.3 Vier Perspektiven der Qualitätsevaluation

3.3.1 Schulbehörde und Schulpolitik

3.3.2 Schulforschung

3.3.3 Schulpraxis

3.3.4 Schulentwicklung

4. Evaluationsformen, -methoden und -modelle

4.1 Ablauf eines Evaluationsvorhabens im Schulbereich

4.2 Verfahren zur Evaluation von Schulqualität im Überblick

4.2.1 Offene, systemunabhängige Evaluationsverfahren

4.2.2 Standardisierte Qualitätssysteme

5. Ausblick

Literatur

Evaluation in der Forschungs- und Innovationspolitik (Stefan Kuhlmann)

1. Einführung

2. Entwicklungslinien der Forschungs- und Innovationsförderung

3. Evaluationsverfahren

3.1 Konzepte und Anwendungsgebiete

3.2 Methoden

3.3 Objektivität und Reichweite von Evaluationsverfahren

4. Innovationssysteme im Wandel

5. Leistungsmessung oder Lernmedium: Evaluation zwischen zwei funktionalen Polen

6. Ausblick

Literatur

Evaluation von Arbeitsmarktpolitik (Bettina Bangel, Christian Brinkmann & Axel Deeke)

1. Konzeptioneller Rahmen

1.1 Zum Stellenwert von Evaluation

1.2 Risiken traditioneller Evaluation oder: Zielorientierte Evaluation als Königsweg?

1.2.1 Risiken traditioneller Evaluationskonzepte

1.2.2 Die Konzeption der zielorientierten Evaluation

2. Aktive Arbeitsförderung auf Bundesebene

2.1 Organisatorische und gesetzliche Hintergründe

2.2 Das sich entwickelnde Monitoring-System

2.3 Wirkungsforschung

2.4 Evaluation als „joint venture“ von Wissenschaft und Praxis

3. Arbeitsmarktpolitik auf Länderebene: Das Beispiel Brandenburg

3.0 Die Rolle der Länder in der Arbeitsmarktpolitik

3.1 Evaluierung der Arbeitsmarktpolitik aus Ländersicht – Die Brandenburger Konzeption der adressatenorientierten Evaluation

3.1.1 Untersuchungsebenen und Evaluationsverfahren

3.1.2 Die drei zentralen Elemente der adressatenorientierten Evaluation – Typologie der Funktionsbereiche und Analysefelder

4. Arbeitsmarktpolitik im Rahmen des Europäischen Sozialfonds (ESF)

4.1 Der Europäische Sozialfonds – Kofinanzierung der Arbeitsmarktpolitik von Bund und Ländern im Rahmen der Europäischen Beschäftigungsstrategie

4.2 Programmierung und Steuerung des ESF in der Phase von 2000 bis 2006

4.3 Monitoring und Evaluation des ESF bis 1999

4.4 Neue Ansätze von Monitoring und Evaluation als Instrumente der Zielsteuerung und strategischen Reflexion des ESF in Deutschland

5. Ausblick

Literatur

Zur Evaluation von Umweltschutz-Maßnahmen in Staat und Unternehmen (Joseph Huber & Axel Müller)

1. Zum Gegenstandsbereich von Evaluationen im Umweltschutz

1.1 Vergesellschaftung der Politik und des Politikzyklus

1.2 Maßnahmen-Evaluation und Politik-Evaluation

1.3 Expertokratische und partizipative Evaluation

2. Ansätze zur Erfassung und Bewertung von Umweltmaßnahmen

2.1 Amtliche und betriebliche Umweltberichterstattung

2.2 Umweltgesamtrechnung

2.3 Ökologische Buchhaltung

2.4 Stoffstromanalyse

2.5 Umweltintensität, MIPS (Material-Intensität pro Nutzeneinheit)

2.6 Ecological Footprint (angeeignete Tragekapazität)

2.7 Kontingentierter Umweltraum

2.8 Ökobilanz und Produktlinienanalyse (Life Cycle Assessment)

2.9 Umweltcontrolling

2.10 Öko-Audit nach EG-Verordnung (EMAS-Verordnung)

2.11 Umweltqualitätsmanagement nach ISO 14001

2.12 Ökologische Produktions- und Produkt-Zertifizierung

2.13 Benchmarking, Öko-Ranking, Öko-Rating

2.14 Umweltverträglichkeitsprüfung

2.15 Technikfolgen- und Risiko-Assessment

3. Zusammenfassung und Ausblick

Literatur

Evaluation staatlicher Entwicklungspolitik (Reinhard Stockmann)

1. Problemstellung

2. Evaluationssystem der staatlichen EZ

2.1 Das Bundesministerium für wirtschaftliche Zusammenarbeit und Entwicklung

2.2 Die Deutsche Gesellschaft für Technische Zusammenarbeit (GTZ)

2.3 Die Kreditanstalt für Wiederaufbau (KfW)

3. Evaluationsdefizite in der EZ

3.1 Unzureichende Wirkungs- und Nachhaltigkeitsorientierung

3.1.1 Mangelhaftes Methodeninstrumentarium

3.1.1.1 Regelinstrumente

3.1.2 Spezielle Wirkungsstudien

3.2 Fehlende Transparenz, Unabhängigkeit und Legitimität

4. Reformanstrengungen und Reformbedarf

5. Bewertung des Reformprozesses und Zukunftsaufgaben

Literatur

Autorenverzeichnis