Developments and challenges of public policy evaluation in the Spanish administration (2000-2021)

Abstract

This article analyses the evolution of public policy evaluation in Spain between 2000 and 2021, at the central and regional levels. To do so, we first assess the presence in Spain of the elements that are present in countries that have made progress in the process of institutionalizing policy evaluation (a regulatory and organizational framework that supports evaluation, evaluation capacity and whether attitudes towards evaluation among policy makers, and whether evaluations are practiced and used). Secondly, we discuss the extent to which the elements that make up the Spanish evaluation system manage to guarantee the core principles (independence, systematic enquiry, professionalism and relevance of analysis) that the literature on institutionalization considers essential for the proper functioning of evaluation systems.

Keywords:

public policy evaluation, institutionalization, core evaluation principles, Spain

References

AEVAL, Agencia Estatal de Evaluación de las Políticas Públicas y Calidad de los Servicios. (2018). Informe General de Actuación de AEVAL 2016. Ministerio de Hacienda. http://www.aeval.es/export/sites/aeval/comun/pdf/agencia/Informe_general_actividad_2016_AEVAL.pdf

AIReF, Autoridad Independiente de Responsabilidad Fiscal. (2021). La institucionalización de la evaluación de Políticas Públicas en Castilla y León: Situación actual y propuestas. https://www.airef.es/wp-content/uploads/2021/10/ESTUDIOS/PDF-WEB-accesible-CASTILLA-Y-LEON-1.pdf

Almunia, M., & Rey-Biel, P. (2020). Por un cambio de cultura en la gestión de los datos en España: Una propuesta de reforma. EsadeECPol, Center for Economic Policy & Political Economy, Insight #17.

Banco Mundial. (2019). World Bank Group Evaluation Principles. https://ieg.worldbankgroup.org/sites/default/files/Data/reports/WorldBankEvaluationPrinciples.pdf

Barberà, O., Doria, E., Ntutumu-Sanchis, F., & Sanchis, P. (2020). La institucionalización de la Evaluación de Políticas Públicas. La Comunitat Valenciana en perspectiva comparada. Universidat de València.

Bustelo, M. (2020). Spain. In R. Stockmann, W. Meyer, & L. Taube (eds.), The Institutionalisation of Evaluation in Europe (pp. 303-328). Palgrave Macmillan.

CEPAL. (2021). Evaluación de programas públicos. Serie Gestión Pública 87. https://repositorio.cepal.org/bitstream/handle/11362/46795/1/S2100039_es.pdf

De la Rica, S. (2020, 17 de Octubre). La evaluación de las políticas públicas en el siglo XXI. El País. https://elpais.com/economia/2020-10-17/la-evaluacion-de-las-politicas-publicas-en-el-siglo-xxi.html

Del Pino, E., & Colino, C. (2021). ¿Qué sabemos sobre cómo reformar la administración?: contenidos, capacidad y trayectorias. In E. Del Pino, & J. Subirats (Eds.), Repensando la Administración ante los Nuevos Riesgos Sociales y Globales (pp. 69-100). INAP.

De Peuter, B., & Pattyn, V. (2009). Evaluation capacity: enabler or exponent of evaluation culture? In A., Fouquet, & L., Méasson (eds.), L'évaluation des politiques publiques en Europe: Cultures et Futurs // Policy and programme evaluation in Europe: Cultures and Prospects (pp. 133-142).? Editions L'Harmattan.

Eurosocial. (2015). Manual de buenas prácticas en la sistematización de la evaluación de políticas públicas. Experiencias de América latina. Documento de trabajo nº. 29.

FEDEA, Fundación de Estudios de Economía Aplicada. (2021). La evaluación de políticas públicas en España: antecedentes, situación actual y propuestas para una reforma. FEDEA Policy Papers 2021/09. https://documentos.fedea.net/pubs/fpp/2021/10/FPP2021-09.pdf?utm_source=wordpress&utm_medium=portada&utm_campaign=estudio

Feinstein, O., & Zapico-Goñi, E. (2010). Evaluation of Government Performance and Public Policies in Spain (ECD Working Papers Series No. 22). The World Bank. Independent Evaluation Group.

Furubo, J., Rist, R., & Sandahl, R. (eds.). (2002). International Atlas of Evaluation. Transaction Publishers.

Garde-Roca, J. A. (2006). La institucionalización de la evaluación de las políticas públicas en España. Auditoria Pública, 39, 17-26.

Garde-Roca, J. A. (2017, 5 de Agosto). AEVAL y su muerte anunciada. Cinco Días. El País. https://cincodias.elpais.com/cincodias/2017/08/04/midinero/1501857354_174399.html

Gobierno de España. (2021a). Plan de Recuperación, Transformación y Resiliencia. https://www.lamoncloa.gob.es/temas/fondos-recuperacion/Documents/30042021-Plan_Recuperacion_%20Transformacion_%20Resiliencia.pdf

Gobierno de España. (2021b). Plan de Recuperación, Transformación y Resiliencia. Componente 29. Mejora de la eficacia del gasto público. https://www.lamoncloa.gob.es/temas/fondos-recuperacion/Documents/16062021-Componente29.pdf

Gudiño, F. M. (2015). Evaluación y aprendizaje en la cooperación para el desarrollo: un análisis del caso español [tesis doctoral, Universidad Complutense de Madrid]. https://eprints.ucm.es/id/eprint/34477/1/T36737.pdf

Herrero, C. (2021). Gestión de recursos públicos y evaluación: un binomio inseparable. Boletín Económico de ICE, 3135, 23-35.

Instituto para la Evaluación de Políticas Públicas. (2021). Estudio de Diagnóstico de la Evaluación de Políticas Públicas en la Administración General del Estado. https://www.mptfp.gob.es/dam/es/portal/funcionpublica/evaluacion-politicas-publi-cas/Informes-de-Evaluacion/DIAGNOSTICO-EVALUACION-AGE/ESTUDIO_ DIAGNOSTICO_EVA_AGE.pdf.pdf

Jacob, S., Speer, S., & Furubo, J. E. (2015). The institutionalization of evaluation matters: Updating the International Atlas of Evaluation 10 years later. Evaluation, 21(1), 6-31. https://doi.org/10.1177/1356389014564248

Lázaro, B. (2015). Comparative study on the institutionalisation of evaluation in Europe and Latin America. Eurosocial Studies No. 15.

Meyer, W., Stockmann, R., & Taube, L. (2020). The Institutionalization of Evaluation. Theoretical Background, Analytical Concept and Methods. In R. Stockmann, W. Meyer, & L. Taube (eds.), The Institutionalisation of Evaluation in Europe (pp. 3-33). Palgrave Macmillan.

Munárriz, Á. (2020, 20 de Septiembre). ¿Quién controla que las políticas sirven de algo? La falta de evaluación dispara el riesgo de una reconstrucción a ciegas. Infolibre. https://www.infolibre.es/noticias/politica/2020/09/18/quien_controla_que_politica_sirven_algo_falta_evaluacion_dispara_riesgo_una_reconstruccion_ciegas_111143_1012.html

OCDE (2021). Evaluation frameworks and practices: a comparative analysis of five OECD countries.

Pattyn, V. (2012). Why organisations (do not) evaluate. A search for necessary and sufficient conditions (COMPASSS Working Paper No. 2012-70).

Pollitt, C., & Bouckaert, G. (2017). Public Management Reform. A Comparative Analysis into the Age of Austerity. Oxford University Press.?

Rist, R. C., Boily, M. H., & Martin, F. (2011). Influencing Change: Building Evaluation Capacity to Strengthen Governance. World Bank. https://openknowledge.worldbank.org/handle/10986/2285

Rosenstein, B. (2015). Status of national evaluation policies global mapping report (2ª edición). Parliamentarians Forum on Development Evaluation in South Asia and EvalPartners. https://globalparliamentarianforum.files.wordpress.com/2016/02/the-status-of-evaluation-policies.pdf

Rossi, P. H., Freeman, H. E., & Lipsey, M. W. (2003). Evaluation: A Systematic Approach. Seventh Edition. Sage Publications, Inc.

Ruiz, A. (2012). Panorámica actual de la evaluación de las políticas públicas. Presupuesto y Gasto Público, 68, 13-23.

Stockmann, R., Meyer, W., & Taube, L. (eds). (2020a). The Institutionalisation of Evaluation in Europe. Palgrave Macmillan.

Stockmann, R., Meyer, W., & Taube, L. (2020b). The Institutionalisation of Evaluation in Europe: A Synthesis. In R. Stockmann, W. Meyer, & L. Taube (eds.), The Institutionalisation of Evaluation in Europe (pp. 483-521). Palgrave Macmillan.

Stufflebeam, D. L., & Shinkfield, A. J. (1995). Evaluación sistemática: Guía teórica y práctica. España: Centro de Publicaciones del Ministerio de Educación y Ciencia. Ediciones Paidós Ibérica.

Unión Europea. (2007). Developing Evaluation Capacity. https://ec.europa.eu/regional_policy/sources/docgener/evaluation/pdf/report_integrated_2007.pdf

Vedung, E. (2010). Four waves of evaluation diffusion. Evaluation, 16(3), 263–277.?