Development of evaluation and evaluation research in Germany
https://doi.org/10.31249/poln/2020.01.07
Abstract
In discussing the development of evaluation and evaluation research in this article the distinction is made between an initial and a consolidation phase. The former setting off in the late 1960 s is linked with the expansion of reform policies in which, under the conceptual influence of the related development in the USA, evaluation has been introduced as a procedure of analysis and «feedback» on goal attainment and on the effects of political programmes and measures, in part connected with the claim of a ‘scientification' of policymaking (‘experimental policies'). Due to the emergence of evaluation research as (external) ‘contractual research' the traditional research ‘landscape' shaped by university-based ‘basic' research, and the relation between the political world and the ‘scientific community' have been profoundly changed. In the ‘consolidation phase' the further development has been significantly impacted by New Public Managementnspired political and administrative modernization and the systematic evaluation required by the European Union for its structural funds. The progressive institutionalisation and professionalisation of evaluation research is evidenced by the foundation of the (German) Evaluation Society (DeGEval) in 1997 and of the (German language) Journal of Evaluation (Zeitschrift für Evaluation) in 2002.
References
1. Arbeitsfelder und Herausforderungen der Evaluation / W. Böttcher, C. Kerlen,P. Maats, O. Schwab, S. Sheikh // Evaluation in Deutschland und Österreich / W. Böttcher, C. Kerlen, P. Maats, O. Schwab, S. Sheikh (Hrsg). Münster: Waxmann, 2014. S. 7-14.
2. Balthasar A. Fremdund Selbstevaluation kombinieren: der "Critical Friend Approach" als Option // Zeitschrift für Evaluation. 2012. Jg. 11, Heft 2. S. 173-192.
3. Bangel B., Brinkmann C., Deeke A. Evaluation von Arbeitsmarktpolitik // Evaluationsforschung / R. Stockmann (Hrsg). 3 Aufl. Münster: Waxmann, 2006. S. 311344.
4. Better Regulation: Bessere Institutionen und Normen als Voraussetzung für erfolgreiches Regieren / Gesellschaft für Programmforschung (Hrsg). Lohmar: Eul, 2009. 222 S.
5. Beyme K. von. Policy Analyse und traditionelle Politikwissenschaft // Policy-Forschung in der Bundesrepublik Deutschland. Ihr Selbstverständnis und ihr Verhältnis zu den Grundfragen der Politikwissenschaft / H.-H. Hartwich (Hrsg). Wiesbaden: Westdeutscher Verlag, 1985. S. 7-29.
6. Böhret C., Hugger W. Der Praxistest von Gesetzentwürfen: am Beispiel d. Referentenentwurfs e. Jugendhilfegesetzes. Baden-Baden: Nomos, 1980. 162 S.
7. Büeler X. Qualitätsevaluation und Schulentwicklung // Evaluationsforschung / R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006. S. 260-288.
8. Campbell D. Reforms as experiments // American psychologist. 1969. Vol. 24, N 4. P. 409-429.
9. DeGEval. Standards für Evaluation. Köln: Geschäftsstelle DeGEval, 2002. Zugriffsmodus: https://www.degeval.org/?id=135 (zugegriffen: 11.12.2019.).
10. Derlien H.-U. Genesis and structure of evaluation efforts in comparative perspective // Program evaluation and the management of government / R.C. Rist (ed.). New Brunswick; L.: Transaction, 1990 b. P. 147-176.
11. Derlien H.-U. Die Erfolgskontrolle staatlicher Planung, Eine empirische Untersuchung über Organisation, Methode und Politik der Programmevaluation. Baden-Baden: Nomos, 1976. 177 S.
12. Derlien H.-U. Program evaluation in the Federal Republic of Germany // Program evaluation and the management of government / R.C. Rist (ed.). New Brunswick; L.: Transaction, 1990 a. P. 37-52.
13. Derlien H.-U. Stand und Entwicklung der Programmforschung in der öffentlichen Verwaltung // Programmforschung in der öffentlichen Verwaltung, Werkstattbericht 1 der Gesellschaft für Programmforschung / H.-U. Derlien (Hrsg). München, 1981. S. 5-45.
14. Derlien H.-U., Rist R.C. Policy evaluation in international comparison // International atlas of evaluation / J.-E. Furubo, R. Rist, R. Sandahl (eds). New Brunswick; L.: Transaction, 2002. P. 425-456.
15. Dierkes M., Knie A., Wagner P. Die Diskussion über das Verhältnis von Technik und Politik in der Weimarer Republik // Leviathan. 1988. Jg. 16, Heft 1. S. 1-23.
16. Elzinga A. Research bureaucracy and the drift of epistemic criteria // The university research system / B. Wittrock, A. Elzinga (eds). Stockholm: Almqvist & Wiksell International, 1985. P. 191-220.
17. Evaluation in Deutschland und Österreich / W. Böttcher, C. Kerlen, P. Maats,O. Schwab, S. Sheikh (Hrsg). Münster: Waxmann, 2014. 219 S.
18. Evaluation in public sector-reform: concepts and practice in international perspective /H. Wollmann (Hrsg.). Cheltenham: Edward Elgar, 2003. 269 p.
19. Evaluation research and practice. Comparative and international perspectives /R.A. Levine, M.A. Solomon, G.-M. Hellstern, H. Wollmann (Hrsg). Beverly Hills; L.: Sage, 1981. 254 p.
20. Evaluation. Ein systematisches Handbuch / T. Widmer, W. Beywl, C. Fabian (Hrsg). Wiesbaden: Springer, 2009. 636 S.
21. Evaluierung und Erfolgskontrolle in Kommunalpolitik und -verwaltung / G.-M. Hellstern, H. Wollmann (Hrsg). Basel: Birkhäuser, 1984. 680 S.
22. Experimentelle Politik Reformstrohfeuer oder Lernstrategie. Bestandsaufnahme und Evaluierung / G.-M. Hellstern, H. Wollmann (Hrsg). Opladen: Westdeutscher Verlag, 1983. 556 S.
23. Filsinger D. Ten years of the center for evaluation // The future of evaluation /R. Stockmann, W. Meyer (eds). Hampshire: Palgrave Macmillan, 2016. P. 2-8.
24. Forschung über Evaluation. Bedingungen, Prozesse und Wirkungen / J. Hense,S. Rädiker, W. Böttcher, T. Widmer (Hrsg). Münster: Waxmann, 2013. 282 S.
25. Frais M., Renz M. Evaluation im Schulbereich // Evaluation in Deutschland und Österreich / W. Böttcher, C. Kerlen, P. Maats, O. Schwab, S. Sheikh (Hrsg). Münster: Waxmann, 2014. S. 89-99.
26. Freeman H., Solomon M.A. The next decade of evaluation research // Evaluation research and practice. Comparative and international perspectives / Levine R.A., Solomon M.A., Hellstern G.-M., Wollmann H. (eds). Beverly Hills; L.: Sage, 1981. P. 1227.
27. Furubo Jan-E., Sandahl R. A diffusion perspective on global developments in evaluation // International atlas of evaluation / J.-E. Furubo, R. Rist, R. Sandahl (eds). New Brunswick; L.: Transaction, 2002. P. 1-26.
28. Gesetzgebungslehre. Grundlagen Zugänge Anwendung / W. Schreckenberger,K. König, W. Zeh, E. Baden (Hrsg). Stuttgart: Kohlhammer, 1986. 201 S.
29. Grajewski R., Meyer S. Stand der Evaluation in der Strukturpolitik // Evaluation in Deutschland und Österreich / W. Böttcher, C. Kerlen, P. Maats, O. Schwab,S. Sheikh (Hrsg). Münster: Waxmann, 2014. S. 37-59.
30. Handbuch zur Evaluierungsforschung / G.-M. Hellstern, H. Wollmann (Hrsg). Opladen: Westdeutscher Verlag, 1984. Band 1. 680 S.
31. Hellstern G.-M., Wollmann H. Bilanz Reformexperimente, wissenschaftliche Begleitung und politische Realität // Experimentelle Politik Reformstrohfeuer oder Lernstrategie / G.-M. Hellstern, H. Wollmann (Hrsg). Opladen: Westdeutscher Verlag, 1983. S. 1-78.
32. Hellstern G.-M., Wollmann H. Evaluierung und Erfolgskontrolle auf der kommunalen Ebene. Ein Überblick // Evaluierung und Erfolgskontrolle in Kommunalpolitikundverwaltung / G.-M. Hellstern, H. Wollmann (Hrsg). Basel: Birkhäuser, 1984 b. S. 10-45.
33. Hellstern G.-M., Wollmann H. Evaluierung und Evaluierungsforschung ein Entwicklungsbericht // Handbuch zur Evaluierungsforschung / G.-M. Hellstern,H. Wollmann (Hrsg). Opladen: Westdeutscher Verlag, 1984 a. Band 1. S. 17-90.
34. Hellstern G.-M., Wollmann H. Sanierungsmaßnahmen. Städtebauliche und stadtstrukturelle Wirkungen (methodische Vorstudie). Bad Godesberg: Schriftenreihe des BMBau, 1978. 135 S.
35. Heyer G. Zielsetzung und Struktur der "Hartz-Evaluation" // Zeitschrift für Arbeitsmarktforschung. 2006. Jg. 30, Heft 3/4. S. 467-476.
36. Hohn H.-W., Schimank U. Konflikte und Gleichgewicht im Forschungssystem. Frankfurt; N.Y.: Campus Verlag, 1990. 444 S.
37. International atlas of evaluation / J.-E. Furubo, R. Rist, R. Sandahl (eds). New Brunswick: Transaction, 2002. 471 p.
38. Jaedicke W., Thrun T., Wollmann H. Modernisierung der Kommunalverwaltung. Evaluierungsstudie zur Verwaltungsmodernisierung im Bereich Planen, Bauen und Umwelt. Stuttgart: Kohlhammer, 2000. 280 S.
39. Konzendorf G. Gesetzesfolgenabschätzung // Handbuch zur Verwaltungsreform /B. Blanke, F. Nullmeierl, C. Reichard, G. Wewer (Hrsg). 4. Aufl. Wiesbaden: VS, 2011. S. 135-143.
40. Konzendorf G. Institutionelle Einbettung der Evaluationsfunktion in Politik und Verwaltung in Deutschland // Evaluation. Ein systematisches Handbuch / T. Widmer,W. Beywl, C. Fabian (Hrsg). Wiesbaden: VS, 2009. S. 27-33.
41. Kritz J. Aktionsforschung // Lexikon der Politikwissenschaft / D. Nohlen, R.-O. Schultze (Hrsg). München: C.H. Beck, 2004. Bd. 1. S. 10-11.
42. Kromrey H. Evaluation in Wissenschaft und Gesellschaft // Zeitschrift für Evaluation. 2003. Jg. 2, Heft 1. S. 93-116.
43. Kromrey H. Evaluation. Empirische Konzepte zur Bewertung von Handlungsprogrammen und die Schwierigkeiten ihrer Realisierung // Zeitschrift für Sozialforschung und Erziehungssoziologie. 1995. Jg. 15, Heft 4. S. 313-336.
44. Kuhlmann S. Die Evaluation von Institutionenpolitik in Deutschland: Verwaltungsmodernisierung und Wirkungsanalyse im föderalen System // Evaluation. Ein systematisches Handbuch / T. Widmer, W. Beywl, C. Fabian (Hrsg.). Wiesbaden: Springer, 2009. S. 371-380.
45. Kuhlmann S. Evaluation in der Forschungsund Innovationspolitik // Evaluationsforschung / R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006. S. 289-310. Kuhlmann S. Evaluation von Forschungsund Innovationspolitik in Deutschland
46. Stand und Perspektiven // Evaluation. Ein systematisches Handbuch / T. Widmer,W. Beywl, C. Fabian (Hrsg). Wiesbaden: Springer, 2009. S. 283-294.
47. Kuhlmann S., Bogumil J., Grohs S. Evaluating administrative modernization in German local governments // Public administrative review. 2008. Jg. 68, Heft 5. S. 851-863.
48. Kuhlmann S., Wollmann H. Transaktionskosten von Verwaltungsreformen ein "missing link" der Evaluationsforschung // Public Management. Grundlagen, Wirkungen, Kritik / W. Jann, M. Röber, H. Wollmann (Hrsg). Wiesbaden: Springer, 2006. S. 371-390.
49. Kuhlmann S., Wollmann H. Verwaltung und Verwaltungsreformen in Europa. Wiesbaden: Springer, 2013. 313 S.
50. Lasswell H.D. The policy orientation // Policy sciences / D. Lerner, H.D. Lasswell (Hrsg). Stanford: Stanford university press, 1951. S. 3-15.
51. Leeuw F. Evaluation in Europe // Evaluationsforschung / R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006. S. 64-84.
52. Levine R.A. Program evaluation and policy analysis in Western Nations: an overview // Evaluation research and practice. Comparative and international perspectives /R.A. Levine, M.A. Solomon, G.-M. Hellstern, H. Wollmann (Hrsg). Beverly Hills; L.: Sage, 1981. P. 12-27.
53. Lorz R.E. Das Inspektionsreferat des Bundesministeriums für wirtschaftliche Zusammenarbeit // Handbuch zur Evaluierungs-forschung / G.-M. Hellstern, H. Wollmann (Hrsg). Opladen: Westdeutscher Verlag, 1984. Bd. 1. S. 289-301.
54. Lutz B. Zur Problematik programmbegleitender Sozialforschung // Experimentelle Politik Reformstrohfeuer oder Lernstrategie / G.-M. Hellstern, H. Wollmann (Hrsg). Opladen: Westdeutscher Verlag, 1983. S. 258-261.
55. Maag Merki K. Evaluation im Bildungsbereich Schule in Deutschland // Evaluation. Ein systematisches Handbuch / T. Widmer, W. Beywl, C. Fabian (Hrsg). Wiesbaden: Springer, 2009. S. 157-162.
56. Maier H. Die ältere deutsche Staatsund Verwaltungslehre. München: C.H. Beck, 1980. 353 P.
57. Mertens D.M. Institutionalizing evaluation in the United States of America // Evaluationsforschung / R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006. S. 4763.
58. Mertens D.M. The role of evaluation in social change: perspectives on the future of evaluation from the USA // The future of evaluation. Global trends, new challenges, shared perspectives / R. Stockmann, W. Meyer (eds). Hampshire: Palgrave Macmillan, 2016. P. 214-217.
59. Meyer W., Stockmann R. Conclusion: shared perspectives or a united world of evaluation // The future of evaluation. Global trends, new challenges, shared perspectives /R. Stockmann, W. Meyer (eds). Hampshire: Palgrave Macmillan, 2016. P. 328357.
60. Neubert S., Mack D., Roxin H. Vom Methodenstreit zum Methodenmix -Chronologie und Stand der Entwicklungsevaluierung in Deutschland // Evaluation in Deutschland und Österreich / W. Böttcher, C. Kerlen, P. Maats, O. Schwab, S. Sheikh (Hrsg). Münster: Waxmann, 2014. S. 61-72.
61. Patton M.Q. Utilization-focused evaluation. The new century text. 3-rd ed. Thousand Oaks: Sage, 1997. 448 p.
62. Pollitt C., Bouckaert G. Public management reform. Oxford: Oxford university press, 2011. 392 p.
63. Qualität und Ergebnis öffentlicher Programme: Ein Werkstattbericht / D. Schimanke (Hrsg.). Münster: Waxmann, 2007. 230 S.
64. Reichard C. Umdenken im Rathaus: Neue Steuerungsmodelle in der deutschen Kommunalverwaltung. Berlin: Edition Sigma, 1994. 91 S.
65. Rein M. Comprehensive program evaluation // Evaluation research and practice. Comparative and international perspectives / R.A. Levine, M.A. Solomon, G.-M. Hellstern, H. Wollmann (Hrsg.). Beverly Hills; L.: Sage, 1981. S. 132-149.
66. Rossi P. The professionalization of evaluation research in the United States // Evaluation research and practice. Comparative and international perspectives / R.A. Levine,M.A. Solomon, G.-M. Hellstern, H. Wollmann (Hrsg.). Beverly Hills; L.: Sage, 1981. P. 220-236.
67. Rossi P., Freeman H. Evaluation. A systematic approach. Thousand Oaks: Sage, 1993. 488 p.
68. Rossi P., Freeman H., Hofmann G. Programm Evaluation. Einführung in die Methoden angewandter Sozialforschung. Stuttgart: Enke, 1988. 229 S.
69. Schwab O. Evaluierung von Raumordnungspolitik in Deutschland // Evaluation. Ein systematisches Handbuch / T. Widmer, W. Beywl, C. Fabian (Hrsg). Wiesbaden: Springer, 2009. S. 403-413.
70. Stockmann R. Editorial. Zur Notwendigkeit und Konzeption einer deutschsprachigen "Zeitschrift für Evaluation" // Zeitschrift für Evaluation. 2002. Jg. 1, Heft 1. S. 3-9.
71. Stockmann R. Evaluation in Deutschland // Evaluationsforschung / R. Stockmann (Hrsg). Opladen: Leske + Budrich, 2000. S. 11-40.
72. Stockmann R. Evaluation in Deutschland // Evaluationsforschung / R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006 a. S. 15-46.
73. Stockmann R. Evaluation staatlicher Entwicklungspolitik // Evaluationsforschung /R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006 b. S. 378-414.
74. Stockmann R., Meyer W. Evaluation between science and utility // The future of evaluation. Global trends, new challenges, shared perspectives / R. Stockmann, W. Meyer (Hrsg). Hampshire: Palgrave Macmillan, 2016. P. 238-253.
75. The future of evaluation. global trends, new challenges, shared perspectives /R. Stockmann, W. Meyer (eds). Hampshire: Palgrave Macmillan, 2016. 393 p.
76. Wagner G. Evaluation in der Arbeitsmarktpolitik in Deutschland // Evaluation. Ein systematisches Handbuch / T. Widmer, W. Beywl, C. Fabian (Hrsg). Wiesbaden: Springer, 2009. S. 117-126.
77. Wagner P. Sozialwissenschaften und Staat. Frankreich, Italien, Deutschland 18701980. Frankfurt am Main: Campus, 1990. 533 S.
78. Wagner P., Wollmann H. Beyond serving state and bureaucracy: problem-oriented social science in (west)Germany // Knowledge and policy. 1991. Vol. 4, N 1-2. P. 56-88.
79. Wagner P., Wollmann H. Fluctuations in the development of evaluation research. Do "regime shifts" matter? // International social science journal. 1986 a. Vol. 38, N 2. P. 205-218.
80. Wagner P., Wollmann H. Social scientists in policy research and consulting. Some cross-national comparisons // International social science journal. 1986 b. Vol. 38, N 4. P. 601-617.
81. Weiss C.H. Evaluierungsforschung. Methoden zur Einschätzung von sozialen Reformprogrammen. Opladen: Westdeutscher Verlag, 1974. 193 S.
82. Wholey J.S. Using Evaluation to Improve Program Performance // Evaluation Research and Practice. Comparative and International Perspectives / R.A. Levine,M.A. Solomon, G.-M. Hellstern, H. Wollmann (eds). Beverly Hills; L.: Sage, 1981. P. 92-106.
83. Wie lernt Politik? Voraussetzungen, Formen und Erfolge: Ein Werkstattbericht /D. Schimanke, A. Fischer, M. Bucksteed (Hrsg.). Münster: Waxmann, 2006. 168 S.
84. Wittmann W. Evaluationsforschung. Aufgaben, Probleme und Anwendungen. Berlin: Springer, 1985. 548 S.
85. Wittrock B., Wagner P., Wollmann H. Social science and the modern state: policy knowledge and political institutions in Western Europe and the United States // Social science and the modern state / P. Wagner, C. Hirschon Weiss, B. Wittrock,H. Wollmann (eds). Cambridge: Cambridge university press, 1991. S. 28-85.
86. Wollmann H. Contractual research and policy knowledge // International encyclopedia of the social and behavioral sciences. Amsterdam: Elsevier, 2002 b. Vol. 5. P. 11574-11578.
87. Wollmann H. Evaluation in public sector reform. Trends, potentials and limits in international perspective // Evaluation in public sector-reform / H. Wollmann (ed.). Cheltenham: Edward Elgar, 2003 b. P. 231-258.
88. Wollmann H. Evaluation in public-sector reform. Towards a "Third wave" of evaluation? // Evaluation in public sector-reform / H. Wollmann (ed.). Cheltenham: Edward Elgar, 2003 a. P. 1-11. EDN: QQEOKJ
89. Wollmann H. Evaluation und Verwaltungspolitik. Konzepte und Praxis in Deutschland und im internationalen Kontext // Evaluationsforschung / R. Stockmann (Hrsg). 3. Aufl. Münster: Waxmann, 2006. S. 207-233.
90. Wollmann H. Gesetzgebung als experimentelle Politik Möglichkeiten, Varianten und Grenzen erfahrungswissenschaftlich fundierter Gesetzgebungsarbeit // Gesetzge bungslehre. Grundlagen Zugänge Anwendung / W. Schreckenberger, K. König,W. Zeh, E. Baden (Hrsg). Stuttgart: Kohlhammer, 1986. S. 72-95.
91. Wollmann H. Kontrolle in Politik und Verwaltung: Evaluation, Controlling und Wissensnutzung // Lehrbuch der Politikfeldanalyse 2.0 / K. Schubert, N. Brandelow (Hrsg). 2. Aufl. München: Oldenbourg, 2009. S. 379-400.
92. Wollmann H. Konzept und Methode der Begleitforschung // Informationen zur Raumentwicklung. 1990. Heft 10/11. S. 563-575.
93. Wollmann H. Policy analysis in West Germany's federal government: a case of unfinished governmental and administrative modernization? // Governance. 1989. Vol. 2, N 3. P. 233-263.
94. Wollmann H. Policy analysis. Some observations on the West German scene // Policy sciences. 1984. Vol. 17, N 1. S. 27-48.
95. Wollmann H. Policy evaluation and evaluation research // Handbook of public policy analysis / F. Fischer, G.J. Miller, M.S. Sidney (Hrsg). Boca Raton: CRC Press, 2007. S. 393-404.
96. Wollmann H. Soziologie zwischen Kaiserreich, Weimarer Republik und NS-Regime // Geschichte der Universität Unter den Linden 1810-2010 / H.-E. Tenorth (Hrsg). Berlin: Akademie-Verlag, 2010. Band 5. S. 257-274.
97. Wollmann H. Spurensuche. Warum ich Politikwissenschaftler wurde und worüber ich arbeitete und schrieb // Starke Kommunen wirksame Verwaltung: Fortschritte und Fallstricke der internationalen Verwaltungsund Kommunalforschung /S. Kuhlmann, O. Schwab (Hrsg). Berlin: Springer, 2017. S. 241-280.
98. Wollmann H Untersuchungsansätze und Nutzungschancen einer Rechtstatsachenforschung im Städtebaurecht // Informationen zur Raumentwicklung. 1982. Heft 1. S. 1-20.
99. Wollmann H. Verwaltungspolitik und Evaluierung. Ansätze, Phasen und Beispiele im Ausland und in Deutschland // Zeitschrift für Evaluation. 2002 a. Jg. 2, Heft 2. S. 75-101.
100. Wollmann H. Zur (Nicht-) Verwendung von Evaluationsergebnissen in Politik und Verwaltung. Eine vernachlässigte Fragestellung der Evaluationsforschung // Wissen und Expertise in Politik und Verwaltung, der moderne Staat. Sonderheft 1 / S. Kropp,S. Kuhlmann (Hrsg). Opladen: Verlag Barbara Budrich, 2013. S. 87-103.
101. Wollmann H., Hellstern G.-M. Sozialwissenschaftliche Untersuchungsregeln und Wirkungsforschung // Res Publica, Studien zum Verfassungswesen / P. Haungs (Hrsg). München: Fink Verlag, 1977. S. 415-466.
102. Wottawa H., Thierau H. Lehrbuch evaluation. 3. Aufl. Bern: Huber, 2003. 176 S.
103. Wottawa H., Thierau H. Lehrbuch evaluation. Bern: Huber, 1990. 181 S.
104. Zehn Jahre Neues Steuerungsmodell / J. Bogumil, S. Grohs, S. Kuhlmann, A.K. Ohm. Berlin: Sigma, 2007. 342 S.