www.coneval.gob.mx

Mayo 2012

Evaluación del Desempeño: Midiendo Resultados en el

Sector Público

Gonzalo Hernández Licona

Avance fundamental de prácticas objetivas/independientes de Auditoría y de Evaluación en México

• 2000-2001 Auditoría Superior de la Federación• 2004 Ley de Transparencia y Acceso a la Información• 2004 Ley General de Desarrollo Social• 2006 Creación de Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL).• 2006 Ley de Presupuesto y Responsabilidad Hacendaria.• 2006 Sistema de Evaluación del Desempeño• Creación de instancias de evaluación en unas pocas entidades de la República

DEMOCRACIA

TRANSPARENCIA

AUDITORÍA / EVALUACIÓN

Medir RESULTADOS

En Democracia se miden Resultados

DEMOCRACIA

EJECUTIVO CONGRESO

AUDITORÍA / EVALUACIÓN

Medir RESULTADOS

Democracia Efectiva: Pesos y Contrapesos

Un poco de historia: Evaluación de la Política de Desarrollo Social

• Antes del 2000 no había medición oficial de pobreza en México ni evaluaciones sistemáticas de programas.• En 1997 el Congreso ya no tiene la mayoría del partido del Presidente, por primera vez.• En el PEF 2000 se piden por primera vez evaluaciones externas a los programas del Ejecutivo.• En 2004 todos los partidos firmaron la Ley General de Desarrollo Social (LGDS), que crea un organismo independiente, CONEVAL , para que sea éste el que mida la pobreza a nivel nacional, estatal y municipal• Estos mismos contrapesos no han sucedido en muchas Entidades Federativas . Por esa razón, el avance en Evaluación/Auditorías Externas ha sido más lento.

Medición de Resultados: CONEVAL

La Ley General de Desarrollo Social establece la creación del CONEVAL (se establece en 2006):

o Medición de la pobreza multidimensional a nivel nacional, estatal y municipal

o Normar y coordinar la evaluación de programas y políticas de Desarrollo Social

El CONEVAL está integrado por 6 investigadores académicos electos por la Comisión Nacional de Desarrollo Social.

¿Para qué Evaluar? Identificar y cuantificar el problema

Análisis

Diseño de programas Presupuesto Operación

Evaluación y Monitoreo

Mejorar políticas y programas públicos

Tomar mejores decisiones (de operación, diseño, presupuestales..)

Rendición de Cuentas

Planeación de la Política Social

1. Identificar los principales problemas sociales

2. Programas y políticas sociales con resultados

3. Mejora de programas y políticas públicas

• Medición de Pobreza en varias dimensiones

• Evaluación de programas y políticas

Toma de decisiones en base a Resultados

• Medición Multidimensional de la Pobreza (Estimaciones Nacionales y Estatales)o Bienestar económicoo Rezago educativoo Acceso a los servicios de saludo Acceso a la seguridad socialo Calidad y espacios de viviendao Acceso a los servicios básicos en la viviendao Acceso a la alimentacióno Grado de cohesión social

• Índice de rezago social• Índice de Tendencia Laboral de la Pobreza

(ITLP)• Mapas de Pobreza• Medición de la Pobreza por Ingreso

• Programa Anual de Evaluación• Marco Lógico: Programas• Evaluaciones de Consistencia y

Resultados• Evaluación de Impacto• Evaluaciones Complementarias• Evaluaciones de Desempeño• Valoración del Desempeño de los

Programas • Inventario de Programas de Desarrollo

Social• Evaluaciones Temáticas• Evaluación de Políticas• Seguimiento a Recomendaciones• Documento para consideraciones

presupuestarias

Evaluación de Programas Sociales

Medición y Análisis de la Pobreza

CONEVAL: Principales Productos

POBREZA EN VARIAS DIMENSIONES

Porcentaje de la población en situación de pobrezapor municipio. México, 2010

Fuente: estimaciones del CONEVAL con base en el MCS-ENIGH 2010 y la muestra del Censo de Población y Vivienda 2010.

Rangos

[ 0 - 30 ] [ 30 - 50 ] [ 50 - 70 ] [ 70 - 100 ]

Total de municipios

97 347 790 1222

EVALUACIÓN

$$$$

$$$$

$$$$

RESULTADOS

Las Auditorías y las Evaluaciones se han movido hacia medir RESULTADOS

D E S E M P E Ñ O

Procesos

Cobertura

Normas

Normas

Atención a recomendaciones

Indicadores

Avance financiero

Población objetivo

Percepción de beneficiarios

Diseño Impacto

Consistencia

Sistema de Evaluación del Desempeño

Resultados

Seguimiento de Recomendaciones

Planeación EvaluaciónProgramas Sectoriales

contribuyen con el Plan Nacional de

Desarrollo

Programa Anual de Evaluación

Evaluación de Consistencia y

Resultados

Evaluación de Políticas

Evaluación de Procesos

Evaluación de ImpactoProgramas presupuestales

contribuyen con los Programas SectorialesProgramas

Presupuestales con Matriz de

Indicadores

Progresividad y Cobertura

Programas Nuevos

Evaluación Específica de Desempeño

(Resumen de la información en el SED)

 TIPOS DE EVALUACIÓN 2007 2008 2009 2010 2011 TOTAL

Consistencia y Resultados 106 -   - - - 106

Diseño 13 23 31 14 25 106

Impacto  3 5 2 - - 10

Específicas 6 2 2 1 - 11

Estratégicas 2 -   - 2 - 4

Específica de Desempeño -  131 127 133 - 391

Procesos  -  - 5 3 3 11

Complementarias  - 13 13 4 - 30

Matriz de indicadores 133 133 133 220 237 223*

Evaluaciones y MIR de programas y acciones federales de desarrollo social 2007-2012

*Total de Mir a 2012

892 Instrumentos

•Informe: 9 hojas•133 EED 2010-2011

Valoración sintética del desempeño de los programas sociales que se presenta mediante un formato homogéneo con la información del SED.

Evaluaciones Específicas de Desempeño (EED)

RESULTADOS

Seguimiento a recomendaciones

4

Difusión a prensa y sociedad civil

3

Información para  el proceso presupuestario

2

Conductos institucionales para incidir en la mejora de la política social•Congreso: 

Comisión de Presupuesto

•SHCP

+ Reuniones explicativas  + Reuniones con diputadosPágina 

electrónicaPrensa

Sociedad civil

Documentos de trabajo

Entrega a Actores Relevantes

1

•Congreso•SHCP

•Presidencia•Estados

Presupuesto basado en Resultados

 Tipo de  Mejora

    2010 /1 2011 /2

    Programas  Participación Relativa Programas  Participación 

RelativaCorregir actividades o procesos 

del programa    19 16.8% 39 65%

Modificar apoyos del programa    22 19.5% 6 10%Reorientar sustancialmente el 

programa    71 62.8% 12 20%

Adicionar o reubicar el programa    - - 3 5%

Suspender el programa    1 0.9% 0 0%

 TOTAL     113 100%  60 100% 

Cambios en la Política programática de Desarrollo Social

/1 Con información de los Diagnósticos de las Matrices de Indicadores para Resultados 2008 y 2010 /2 Con información del Sistema de Seguimiento a los Aspectos Susceptibles de Mejora (SSAS). Datos preliminares. Para el cálculo se consideraron los aspectos susceptibles de mejora que se atendieron al 100% a septiembre de 2011.

Acciones para mejorar los programas de Desarrollo Social

A partir de los resultados de evaluaciones terminadas en 2010, 13 dependencias y entidades de la APF decidieron mejorar 108 programas federales.

7 de cada 10 acciones que los responsables de los programas sociales realizaron a partir de los resultados de las evaluaciones, estuvieron dirigidas a corregir la gestión de los programas.

 Tipo de  Mejora

    2011

    Acciones cumplidas

Participación Relativa

Corregir actividades o procesos del programa    122 77%

Modificar apoyos del programa    17 10%Reorientar sustancialmente el 

programa    16 11%

Adicionar o reubicar el programa    3 2%Suspender el programa    0 0%

 TOTAL     158 100% Fuente: CONEVAL con información del Sistema de Seguimiento a los Aspectos Susceptibles de Mejora (SSAS).Datos preliminares. Para el cálculo se consideraron los aspectos susceptibles de mejora que se atendieron al 100% a septiembre de 2011.

Presupuesto basado en Resultados

La SEDESOL retomó la información de pobreza del CONEVAL para focalizar y priorizar la atención a los 125 municipios más pobres como parte de la Estrategia 100 x 100

Presidencia creó la Estrategia Nacional para Disminuir la Mortalidad Materna con base en la MML

Se creó el programa Cinco Pasos para su Salud para Vivir Mejor con base en información del CONEVAL sobre la obesidad como problema de salud pública

Se incrementaron los recursos al Programa Nacional de Infraestructura, derivado de la recomendación de otorgar más recursos en infraestructura a zonas geográficamente marginadas,

Derivado  de  la  información  sobre  progresividad  de  los  programas  se  establecieron  topes  a  las transferencias de los beneficiarios con más propiedad del programa PROCAMPO

Se  extendió  a  zonas  urbanas  el  Programa de Empleo Temporal,  derivado  de  la  información  del CONEVAL sobre la insuficiencia en el crecimiento del empleo formal respecto al aumento del informal,

Educación Preescolar y Primaria para Niñ@s de Familias Jornaleras Agrícolas Migrantes creó y fortaleció el SINACEM para contar con la información académica de los alumnos y evitar repetición y deserción

ProÁrbol simplificó el proceso de pago de los apoyos para hacer más eficiente su operación

Se  incrementó  a  6 meses el  tiempo de  cobertura  del  Seguro  Social a  desempleados,  derivado  de  la recomendación de cobertura universal en servicios de salud y seguridad  social

La SHCP tomó en cuenta las evaluaciones para la asignación de presupuesto en 2010, 2011 y 2012.

Mejoras de la Política de Desarrollo Social, basadas en Resultados

Desafíos a futuro…

Seguir fomentando el uso de las evaluaciones para mejorar política pública al interior del Ejecutivo Y EN EL CONGRESO.

Mejorar  el  nexo  entre  los  sistemas  de  evaluación  del  desempeño  y  la elaboración del presupuesto…. 

Avanzar  en  la  evaluación  en  los  gobiernos  locales.  Mayor  autonomía  e independencia de los órganos locales de evaluación y auditoría

Cuidado con el efecto fatiga

Cuidado con la transición sexenal y el nuevo balance entre el Ejecutivo y el Legislativo.

La evaluación puede ser  incómoda….  la democracia  también. Pero ambas son necesarias en sociedades que toman en cuenta a los ciudadanos.

Seguir fomentando el uso de las evaluaciones para mejorar política pública al interior del Ejecutivo Y EN EL CONGRESO.

Mejorar  el  nexo  entre  los  sistemas  de  evaluación  del  desempeño  y  la elaboración del presupuesto…. 

Avanzar  en  la  evaluación  en  los  gobiernos  locales.  Mayor  autonomía  e independencia de los órganos locales de evaluación y auditoría

Cuidado con el efecto fatiga

Cuidado con la transición sexenal y el nuevo balance entre el Ejecutivo y el Legislativo.

La evaluación puede ser  incómoda….  la democracia  también. Pero ambas son necesarias en sociedades que toman en cuenta a los ciudadanos.

11

33

44

55

22

66