12 U005 Completo
12 U005 Completo
12 U005 Completo
U005 1/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
RESULTADOS Y HALLAZGOS
Valoración: Adecuada
Observaciones: 1. Efecto en reducción de gastos catastróficos y efecto menor en el
gasto de bolsillo por medicamentos en la atención ambulatoria, si bien hubo mayor
ahorro en medicamentos para atención hospitalaria. 2. Mayor probabilidad de
utilización de servicios de salud de la población afiliada al Programa. 3. No hubo
efectos en las condiciones de salud.
Calificación: Destacada
Observaciones:El estudio fue elaborado bajo un diseño experimental por
conglomerados Unidades de Salud (con unidad final de análisis poblacional) con
grupo control, aleatorizado en dos mediciones (2005 y 2006), con lo que se cumplen
condiciones de rigor metodológico que hacen confiables los resultados, aunque su
representatividad se limita a la población rural.
Otros Efectos
Hallazgos de Fin 1
1. Año de la Fuente: 2012
U005 2/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
El SP disminuye el gasto de bolsillo entre los hogares afiliados con niños menores a
12 años (-0.48 unidades logarítmicas) y con adultos mayores a 60 años. En hogares
con niños pequeños se encuentra también evidencia de un menor gasto en
medicinas. El costo público de cada peso ahorrado por los hogares afiliados ha venido
en aumento conforme la cobertura del SP se aproxima a la cobertura universal.
3. Fuente: Evaluación Externa (EXT)
4. Elemento de Análisis: Fin
5. Comentarios y Observaciones: El estudio es relevante por ser el primero que se
realiza con el abordaje de costo-efectividad. Es importante la conclusión del efecto
heterogéneo del Programa sobre el gasto de bolsillo
Otros Hallazgos
Hallazgo Relevante 1
1. Año de la Fuente: 2012
2. Hallazgo Relevante: Se encuentran afiliados al sistema 51.8 millones de personas,
con lo cual se declara cobertura universal voluntaria, que reconoce que existe un
grupo de la población que busca administrar sus riesgos financieros por motivos de
salud por otros medios. En cuanto a la operación del Sistema de Protección Social en
Salud (SPSS) se han acreditado 75% de las unidades aunque no se conoce el
porcentaje de personas atendidas en dichas unidades. Un aspecto fundamental que
debe revisarse es el financiamiento de los servicios de salud a la población afiliada.
Se propone crear un solo canal de financiamiento, el cual debe seguir a la demanda;
esto implica, reformar la Ley de Coordinación Fiscal para que el financiamiento del
FASSA-P se consolide con el del SPSS y se asigne a los diferentes estados por
afiliado. Por otra parte, se reconoce que el SPSS documenta sus resultados a nivel de
Fin y Propósito con indicadores de la MIR, informes de resultados, estudios
internacionales, evaluaciones externas que no son de impacto y una evaluación de
impacto. Con base en la información disponible se concluye que el programa ha
tenido resultados positivos a nivel de Fin y Propósito.
3. Fuente: Evaluación de Consistencia y Resultados (ECR)
4. Elemento de Análisis: Otros Resultados
5. Valoración del Hallazgo: Adecuada
6. Comentarios y Observaciones: Hay que tomar en cuenta que los 51.8 millones
de afiliados pueden corresponder al año 2011, sobre el que se realizó la Evaluación.
Por otra parte, destaca la propuesta de crear un solo mecanismo de financiamiento ya
que la existencia de diversas fuentes ha mostrado generar complicaciones
administrativas, de gasto, de supervisión y rendición de cuentas.
De acuerdo al Programa, la cobertura universal se encuentra todavía en proceso
debido a que fue recalculada con los nuevos datos de proyecciones derivados de
CONAPO con fundamento en el Censo de Población y Vivienda 2010.
Hallazgo Relevante 2
1. Año de la Fuente: 2012
U005 3/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Se cuenta con información de respuesta al Seguimiento a los ASM para el año 2012
en el que los responsables del Programa indican que los identificados en la EED
2010-2011 han sido resueltos. El Documento de Posición Institucional
correspondiente a esta EED indica, respecto a la mejora de los indicadores de la MIR,
que “dado que la función del Seguro Popular es financiar los servicios de salud para la
población afiliada, no es atribución del mismo definir indicadores de impacto en el
acceso a los servicios o a los niveles de salud” y afirma que el diseño de la matriz ha
sido aprobado por las instancias evaluadoras. Se tienen disponibles a la fecha los
resultados de la Evaluación de Costo-Efectividad recomendada en el Documento de
Trabajo (DT). Para los años previos, se ha respondido con avances en aspectos
específicos de la operación del Programa.
Aspecto 1
Aspecto: Establecer y definir las metas de cobertura del Seguro Popular con base en
los datos y proyecciones del Censo de Población y Vivienda 2010.
Tipo de Aspecto: Aspecto Específico
U005 4/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Aspecto 2
Aspecto: Realizar modificaciones a la MIR de acuerdo con recomendaciones de la
evaluación.
Tipo de Aspecto: Aspecto Específico
Aspecto 3
Aspecto: Solicitar apoyo para Evaluación Costo Efectividad de padecimientos de alto
costo atendidos con el Fondo de Protección contra Gastos Catastróficos (FPGC).
Tipo de Aspecto: Aspecto Específico
El valor del indicador de Fin (Proporción del gasto de bolsillo en salud de los hogares),
corresponde a 2010, ya que la fuente del mismo es la Encuesta de Ingreso y Gasto de
los Hogares levantada en ese año, de tal forma que no se cuenta con información que
permita analizar su avance. La meta parece adecuada ya que fue calculada de
acuerdo a la tendencia de la encuesta previa realizada en 2006.
El indicador de Propósito (Porcentaje de avance en el cumplimiento de incorporación
al SP) ha tenido un avance satisfactorio superando la meta desde 2011. El indicador
de gestión (Cumplimiento del tiempo empleado para la radicación de los recursos del
Fondo de Protección contra Gastos Catastróficos) ha incrementado su valor en
aproximadamente 10 puntos porcentuales respecto al 2011, que fue su año base; es
prematuro valorar un avance consistente y se esperaría que en los siguientes
períodos la meta fuera menos laxa con el fin de considerar mayor eficiencia en esta
actividad.
No se contó con información para la medición de los avances del Programa en el año
2013 a excepción de la publicación 2013 del Catálogo Universal de Servicios de
Salud.
POBLACIÓN Y COBERTURA
Población Potencial
U005 5/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Población Objetivo
Población Atendida
Entidades Atendidas: 32
Municipios Atendidos: 2457
Localidades Atendidas: 0
Hombres Atendidos: 24,397,346
Mujeres Atendidas: 28,510,665
U005 6/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Evolución de la Cobertura
U005 7/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Análisis de la Cobertura
U005 8/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
U005 9/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
El incremento progresivo en los montos de los presupuestos del año 2008 al 2012 es
notable, con casi 30%, lo que resulta coherente con el aumento de la población
afiliada al Seguro Popular y la elevación de la cantidad de servicios proporcionados.
El crecimiento sostenido del presupuesto va ligado a la cantidad de nuevas personas
afiliadas, ya que el Sistema de Protección Social en Salud implica una aportación
federal por persona afiliada. Aunque se ha ejercido prácticamente el total de los
recursos asignados en el Presupuesto Modificado, no es posible estimar el impacto en
salud, si bien se ha documentado la reducción de gasto de bolsillo en algunos
segmentos poblacionales.
CONCLUSIONES
U005 10/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Fortalezas
Retos y Recomendaciones
1. Efectuar una nueva evaluación externa de impacto que permita contrastar con la
realizada en 2005, con el fin de establecer los efectos del Programa a través del
tiempo.
2. Generar nuevos indicadores que midan mejor la gestión del Programa y no solo el
cumplimiento de acciones administrativas.
3. Revisar las definición de Población Objetivo para hacerla conceptualmente
coherente.
4. Incorporar la dimensión de tutela de derecho para asumir la responsabilidad del
Programa en el acceso efectivo a los servicios y la calidad de la atención, más allá de
la función financiadora.
OBSERVACIONES
El Sistema de Protección Social en Salud o Seguro Popular fue la acción pública más
emblemática y mejor financiada del último sexenio. El programa está respondiendo
positivamente a una serie de observaciones y evaluaciones. Sin embargo, 1) es
positivo que se hayan incorporado a esta evaluación algunos estudios recientes; no
obstante, es necesario que las evaluaciones y los estudios relevantes se hagan
públicos. 2) Hay una brecha entre lo afirmado por las publicaciones oficiales del SP y
la percepción del público, particularmente en lo tocante al acceso efectivo y la calidad
de la atención. 3) En 2012, se usó la noción de "universalidad voluntaria" que da a
entender que toda la población sin seguridad social que lo desea puede afiliarse al
SP. Sin embargo, hay una población que se afiliaría o se mantendría afiliada al SP si
este proceso fuera más sencillo y si los servicios cumplieran con la norma. La
población no afiliada total no carece de acceso sólo por preferir los servicios privados,
sino por deficiencias en el acceso y la atención. 4) Para cumplir cabalmente con su
fin, y para convertirse en un pilar de la protección social universal, es necesario que el
programa por sí mismo o a través de la cabeza de sector (Secretaría de Salud del
Gobierno Federal) aplique mecanismos eficaces de seguimiento del gasto que
aseguren que los fondos transferidos a los estados, y el financiamiento estatal
comprometido, se apliquen realmente a la infraestructura, el personal y los
consumibles médicos pertinentes. La Secretaría de Salud del Gobierno Federal, por
ley, debe regular (incluso acreditar), supervisar y evaluar los servicios estatales.
U005 11/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
La Encuesta Nacional de Ingreso y Gasto de los Hogares 2012 indica una disminución
del gasto en salud en el periodo 2010 a 2012, en el gasto trimestral de los hogares, de
1.4%, mientras que la disminución para el periodo del 2008 a 2012 fue de 8.9%. Esto
produce una probable reducción del gasto de bolsillo y el gasto catastrófico en salud
de los hogares. En cuanto a la cobertura, la población objetivo para ser parte del
Sistema de Protección Social en Salud mediante la afiliación, le es financiada la
atención mediante una cápita por persona, con lo cual los afiliados tienen la
posibilidad, en el momento que lo requiera, de utilizar los servicios de salud, es decir
como población atendida. Se elaboraron trabajos de investigación por instituciones
nacionales e internacionales, los cuales han demostrado el impacto del Seguro
Popular en el gasto de bolsillo y catastrófico, el uso de los servicios de salud y el
acceso a diferentes intervenciones del mismo.
INDICADORES
-Indicador 1
1. Nombre del Indicador: Proporción del gasto de bolsillo en salud de los hogares
2. Definición: Mide el porcentaje del gasto de bolsillo en salud de los hogares
respecto del gasto total en salud
3. Método de Cálculo: (Gasto de bolsillo en salud de los hogares / Gasto total en
salud) X 100
4. Unidad de Medida: Porcentaje
5. Frecuencia de Medición del Indicador: Bianual
6. Año Base: 2006
7. Meta del Indicador 2012: 44.00
8. Línea Base (Valor): 50.00
9. Último Avance (Valor): 47.20
10. Último Avance (Año): 2010
11. Avances Anteriores:
U005 12/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
12. Ejecutivo: NO
-Indicador 1
1. Nombre del Indicador: Proporción del gasto de bolsillo en salud de los hogares
2. Definición: Mide el porcentaje del gasto de bolsillo en salud de los hogares
respecto del gasto total en salud
3. Método de Cálculo: Gasto de bolsillo en salud de los hogares/Gasto total en salud
x 100
4. Unidad de Medida: Porcentaje
5. Frecuencia de Medición del Indicador: Bianual
6. Año Base: 2006
7. Meta del Indicador 2012: 44.00
8. Valor del Indicador 2012: 47.20
9. Año del Valor Inmediato Anterior: 2010
10. Valor Inmediato Anterior: ND
11. Avances Anteriores:
U005 13/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
12. Ejecutivo: SI
-Indicador 2
1. Nombre del Indicador: Porcentaje de avance en el cumplimento de incorporación
de personas al Seguro Popular
2. Definición: Mide la cobertura en relación al total de personas susceptibles de
afiliación al seguro popular en el 2012
3. Método de Cálculo: (Total de personas incorporadas en el año)/(Total de personas
a incorporar en 2012) x 100
4. Unidad de Medida: Porcentaje
5. Frecuencia de Medición del Indicador: Anual
6. Año Base: 2007
7. Meta del Indicador 2012: 98.00
8. Valor del Indicador 2012: 101.10
9. Año del Valor Inmediato Anterior: 2011
10. Valor Inmediato Anterior: 101.00
11. Avances Anteriores:
U005 14/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
12. Ejecutivo: SI
-Indicador 1
1. Nombre del Indicador: Cumplimiento del tiempo empleado para el pago de casos
validados del Fondo de Protección contra Gastos Catastróficos
2. Definición: Mide el cumplimiento del tiempo empleado en la radicación de
Recursos del Fondo de Protección contra Gastos Catastróficos
3. Método de Cálculo: (Número de casos pagados del Fondo de Protección contra
Gastos Catastróficos dentro del tiempo promedio de pago)/(Número total de casos
pagados) x 100
4. Unidad de Medida: porcentaje
5. Frecuencia de Medición del Indicador: Trimestral
6. Año Base: 2011
7. Meta del Indicador 2012: 61.00
8. Valor del Indicador 2012: 61.50
9. Año del Valor Inmediato Anterior: 2011
10. Valor Inmediato Anterior: 50.90
11. Avances Anteriores:
U005 15/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
12. Ejecutivo: NO
INFORMACIÓN ADICIONAL
Fuentes de Información
U005 16/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
Contratación
Forma de contratación del evaluador externo: Convenio
Costo de la Evaluación: $ 98,060.21
Fuente de Financiamiento: Recursos Fiscales
GLOSARIO
U005 17/18
Informe de la Evaluación Específica de Desempeño 2012 - 2013
Valoración de la información de desempeño presentada por el programa
Consejo Nacionalde Evaluación
de la Políticade Desarrollo Social Seguro Popular
Comisión Nacional de Protección Social en Salud
ER Evaluación de Resultados
EED Evaluación Específica de Desempeño
EST Evaluación Estratégica
EXT Evaluación Externa
FT Fichas Técnicas
ICP Informe de Cuenta Pública
IT Informe Trimestral
MIR Matriz de Indicadores para Resultados
MML Matriz de Marco Lógico
AAM Avances en las Acciones de Mejora
Mecanismo 08 Mecanismo de Seguimiento a Aspectos
Susceptibles de Mejora Derivado de
Evaluaciones Externas 2008
Mecanismo 10 Mecanismo de Seguimiento a los
Aspectos Susceptibles de Mejora
Derivado de Evaluaciones Externas 2010
Mecanismo 11 Mecanismo de Seguimiento a los
Aspectos Susceptibles de Mejora
Derivado de Evaluaciones Externas 2011
MTE Metaevaluación
NA No Aplica
ND No Disponible
OTR Otros
PA Población Atendida: población beneficiada
por el programa en un ejercicio fiscal.
PO Población Objetivo: población que el
programa tiene planeado o programado
atender para cubrir la población potencial,
y que cumple con los criterios de
elegibilidad establecidos en su
normatividad.
PP Población Potencial: población total que
presenta la necesidad y/o problema que
justifica la existencia del programa y que
por lo tanto pudiera ser elegible para su
atención.
PPA Plantilla de Población Atendida
OD Opinión de la Dependencia
U005 18/18