Evaluación de programas

Este artículo describe el camino recorrido para desarrollar y evaluar un
programa de formación que versa sobre la enseñanza de la historia y
la evaluación de competencias históricas en Enseñanza Secundaria, a
partir de un modelo innovador que promueve la teoría del pensamiento
histórico, como eje principal.

El objetivo del presente artículo es la ilustración de la potencialidad del Modelo de Diferencias en Diferencias (DiD) para la evaluación de diversas políticas públicas aplicadas en el ámbito territorial y utilizando datos agregados. Con esta finalidad se ha realizado una panorámica general sobre las alternativas de evaluación de políticas públicas y revisado las posibilidades de aplicación sobre un amplio espectro de políticas desarrolladas en la comunidad autónoma del País Vasco. A continuación, se presenta la metodología básica de los modelos de diferencias en diferencias y se realizarán dos aplicaciones alternativas, una de ámbito local, el Programa Izartu, y otra de ámbito regional, el Programa Euskadi de fomento de la sociedad de la información con el fin de ilustrar la potencialidad y limitaciones de la metodología propuestas. El artículo finaliza con un apartado dedicado a la valoración de los resultados obtenidos y con una propuesta para la corrección de los principales problemas metodológicos identificados vinculados con el cumplimiento de la condición de tendencia paralela.

The aim of this paper is the illustration of the potential of the Differences in Differences Model (DiD) for the evaluation of various public policies in the territory and using aggregate data. For this purpose, has made ​​an overview on alternative evaluation of public policies and reviewing the implementation possibilities of a wide range of policies implemented in the País Vasco. Herein are included, the basic methodology of the differences in differences models and two alternative applications, one being local, Programa Izartu and the other regional, Programa Euskadi to promote the information society in order to illustrate the potential and limitations of the methodology proposed. The article concludes with a section on the assessment of the results and a proposal for correction of identified major methodological problems associated with the fulfillment of the condition of parallel trend.

Introducción: Las brechas en salud se incrementan entre las zonas urbana y rural. Y es necesario intervenciones que promuevan la atención integral, así como mejorar la infraestructura y equipamiento en los establecimientos de salud (EESS). Objetivo: Valorar la intervención de la Segunda Fase del Programa de Apoyo a la Reforma del Sector Salud (PARSALUD II) sobre indicadores de proceso de salud materna. Material y métodos: Se realizó estudio descriptivo longitudinal comparativo. Se comparó 07 indicadores de proceso de salud materno, al inicio y final del periodo del 2008 – 2013. Resultados: Se estudió a 66 EESS de 09 departamentos del Perú, los indicadores con cambios significativos en nivel de atención I, fueron: la cobertura de suplemento de sulfato ferroso de 23,85% ± 8,42 a 54,56 ± 14,38; la cobertura de corticoide por parto prematuro de 74,48% ± 40,69 a 84,35% ± 24,89; y en el nivel de atención II, fueron: el porcentaje de partos por cesárea del 8,04% ± 4,74 en el periodo inicial hasta 24,35% ±8,70, el indicador de uso de sulfato de magnesio en casos de hipertensión inducida por la gestación (HIG) de 27,8% ± 32,45 a 29,8%  ± 31,78 al final del periodo. Conclusiones: los establecimientos de salud del ámbito del PARSALUD II, tuvieron un efecto importante sobre los indicadores del proceso de salud de la madre.

Las políticas públicas suelen materializarse a través de programas implementados por diferentes organismos. Cuando son varias agencias las encargadas de llevar a cabo un programa, este conjunto de organizaciones puede adoptar la forma de una red inter-organizativa. El análisis estructural hace posible evaluar este tipo de estructuras en orden a que los resultados de la evaluación puedan incidir positivamente sobre la iniciativa puesta en marcha a través de la red. En este artículo presentamos el potencial del Análisis de Redes Sociales (ARS) para evaluar redes inter-organizativas que ponen en funcionamiento programas de intervención. El manuscrito se divide en cuatro secciones. La primera está dedicada a mostrar antecedentes en los que se emplea el análisis de redes inter-organizativas en la evaluación de programas. En la segunda repasamos los elementos claves para diseñar un análisis estructural, prestando especial atención a los niveles de análisis y a cuestiones relativas al muestreo y al procedimiento de extracción de datos. El tercer bloque se centra en exponer diferentes indicadores que pueden emplearse para evaluar redes inter-organizativas. En la última sección reflexionamos sobre el potencial del ARS en la evaluación de políticas públicas y revisamos técnicas emergentes que pueden mejorar los resultados de la evaluación.

Public Policies are embodied through programs implemented by different organizations. When several agencies are responsible for carrying out a program, this set of organizations may take the form of an inter-organizational network. Structural analysis make possible to assess this kind of structures so that the results of the evaluation has a positive impact on the outcomes of the initiative developed by the network. In this paper we present the potential of Social Network Analysis (SNA) to assess inter-organizational networks which develops intervention programs. To introduce the key elements to develop a structural evaluation, the paper is divided in four sections. First section is devoted to show antecedents in which inter-organizational network analysis is used to assess programs. In the second section we review the core points to design a structural analysis. The third focuses on expose different measures that can be used to assess inter-organizational networks. In the last section we reflect on the potential of SNA in the evaluation of public policies. Finally, emerging techniques which may improve the outcomes of the evaluation process are reviewed.

En los últimos treinta años venimos asistiendo a una progresiva “internalización” de la evaluación de programas y políticas en las administraciones públicas. Esto se ha producido bien porque las administraciones mismas han asumido la función de evaluación o porque éstas han estipulado cómo hacer las evaluaciones y con qué objetivos. Este hecho plantea preguntas importantes para el ciudadano y para la democracia. En este artículo se examinan las consecuencias de esta “apropiación” de la evaluación por parte de la administración a través de dos ejemplos: uno tomado del ámbito de la cooperación internacional y otro extraído del encargo que una agencia gubernamental hizo para la evaluación de uno de sus programas.

The past 30 years has seen a gradual internalisation of program and policy evaluation into the machinery of government. This happens either through the evaluation function being taken on by administrators themselves, or by those administrators stipulating and proscribing how the evaluation is conducted and for what purposes. This poses important questions for democracy and for the citizen. This article examines the consequences of this 'capture' by the administrative system by looking at two examples: one, taken from the field of international development; the other from a government agency commissioning of an evaluation of one of their programs.