1. Taller de Expertos “Presupuestar en América Latina”
Santiago de Chile, 5 y 6 de Diciembre
Para que sirven los
Indicadores de Desempeño
Marianela Armijo
Consultora
Área de Políticas Presupuestarias y Gestión
Pública
ILPES/CEPAL
Marianela.armijo@cepal.org
2. Contenido
• Lo que dice la teoría del “presupuesto por resultados”
• Que han hecho los países
• Que tipo de indicadores se usan y para qué. Algunas evidencias
• Conclusiones a partir de estudios y balances
• Sugerencias para un mejor uso
• Mejores prácticas internacional
3. Para que sirven los indicadores...la
teoría…
• Mejorar la información para la toma de decisiones en el
proceso presupuestario...mejorar la calidad del gasto
público
• Posibilitar la evaluación
• Mejorar la gestión
• Establecer compromisos de desempeño
• Rendir cuentas
4. Sistemas de Evaluación del
Desempeño Plan Nacional de
(SEV) Desarrollo
Planificación Sectorial
I. Planificación-
Planificación-
Programación- Programación
Presupuesto Presupuestaria con
enfoque a resultados
Sistema de Indicadores
II. Monitoreo y Evaluación de Gestión y resultados
Evaluación de Gestión,
de Resultados (Impacto)
y Resultados
Intermedios
III. Rendición de Cuentas
Informes de Evaluación
Anual Resultados de la
Gestión, Congreso,
Órganos de Control
5. Que han hecho los países
• Países con Sistemas de Evaluación con intentos
de integración de evaluación del desempeño
entre niveles de decisión gubernamental (Plan-
Presupuesto)
– Colombia: SINERGIA
– Costa Rica: MAPI-POIS
– Uruguay SEV
– Brasil Plan Plurianual. PPA
– México SED
6. Que han hecho los países
• Países sin “Sistema” de Evaluación del
Desempeño pero que usan indicadores
en el proceso presupuestario
– Chile
– Perú
– Argentina
– Bolivia
– Otros…
7. Que tipos de indicadores se usan y para
qué Uso de la Información
Presidencia (Evidencia, solo
• Indicadores “agregados”, nivel país Colombia)
– Monitoreo y evaluación? de Ministerio de Hacienda (Poca Evidencia)
las metas del Plan
Nacional del Desarrollo.
Se publican en algunos países…(Costa
• Indicadores a nivel sectorial: Educación, Salud,
Rica, México, Brasil, Colombia)
Seguridad Pública, Transporte, etc.
– Monitoreo y evaluación de metas sectoriales TdD y para
Se desconoce el uso para
RdC
• Indicadores a nivel Ministerial,laEntidades
Para programación presupuestaria
Descentralizadas PAO,
POI, POA´s
– Programas Presupuestarios, Programas Públicos parecer
El monitoreo y la evaluación…al
Una cuestión de cumplir con las normas
presupuestarias
8. Evidencias….sobre la aplicación de los
indicadores….
• México
Países con Plan Nacional de
Desarrollo
• Costa Rica
• Brasil
• Colombia
Países sin
• Uruguay Plan......Lineamientos y
Agendas...
• Chile
9. Que pasa con los Indicadores que
intentan medir Resultados...vinculados al
seguimiento y evaluación de los Planes
Nacionales
Algunos casos...
10. COSTA RICA: INDICADORES DEL PLAN NACIONAL DE DESARROLLO
Hay información valiosa, pero existe
un desnivel respecto de la
importancia de la información que
entregan los INDICADORES DE
RESULTADO vinculados al Plan
12. Avances en la información sobre la mejora de los
Productos (Bienes y servicios) provistos....
Falta cruzar información sobre qué piensan los
ciudadanos
14. URUGUAY
Hay un esfuerzo importante
Por medir y evaluar los
avances en la gestión de las
Unidades Ejecutoras..., se
trata de vincular Objetivos..,
Metas concretas..e
Indicadores
15. ¿Es necesario tratar de medir impacto para la
producción genérica o intangible..?
Aplicable a todos los paises
16. CHILE: Indicadores al Presupuesto
Efectivo Estimad
Producto Estratégico al Efectivo Efectivo Efectivo Meta
Indicador Fórmula de Cálculo a Junio o
que se Vincula 2001 2002 2003 2005
2004 2004
•Subsidios Eficacia/Result ((Número de
ado Intermedio subsidios pagados
Habitacionales dentro del
periodo de
Porcentaje de vigencia (sin
subsidios renovación) año 45.0 30.0 25.0 45.0
pagados dentro t-2/Número total s.i. s.i. % % % %
del periodo de de subsidios
vigencia año t otorgados cuyo
periodo de
del total de
vigencia (sin
subsidios renovación)
otorgados. termina año t-
Aplica Enfoque de Género: NO 2)*100)
•Viviendas Eficacia/Produ
cto ((Suma en días
Porcentaje del del tiempo real
tiempo efectivo de ejecución de 116.4 147.1 156.1 136.4
en ejecutar las las obras s.i. s.i. % % % %
terminadas año
obras sobre el
t/Suma en días
tiempo del tiempo según
estipulado por contrato de las
contrato obras terminados
Aplica Enfoque de Género:
año t)*100)
NO
17. Producto
Fórmula de Efecti Pon
Estratégico al Indicador Efecti Efecti Efecti Estim
Cálculo vo a Meta de-
que se Vincula vo vo vo ado
Junio 2005 raci
2001 2002 2003 2004
2004 ón
•Obras Urbanas
y Programas Eficiencia/Prod ((Número de
Concursables ucto Metros
Lineales (ML)
− Programas
Concursables pavimentados
en la
≈Pavimentos Porcentaje de
Participativos MetrosLos indicadores dede
modalidad calidad de vivienda
Lineales (ML) Pavimentos
pavimentados Participativos
Calidad Total entorno ..
año t/Nº del 15
en la modalidad
de Metros %
Pavimentos 104.4 34.5 90.0 100.0
Satisfacción de loss.i.
Participativos Lineales (ML) usuarios
s.i. % % % %
en relación con según lo
lo Programado
Calidad construcción obras y viviendas, están
Programado. año t)*100)
ausentes...
Aplica Enfoque
de Género: NO
19. Indudablemente los SEV dan cuenta
de avances
Colombia: Uruguay Chile: Costa Rica
Monitoreo y TdD Metas Indicadores y Uso de Indicadores y Uso en la Información más
Presidenciales los Indicadores como formulación y estratégica al
Insumo Rendición de Cuentas apoyo a la formulación evaluación presupuesto
presupuestaria Presupuesto Más simplicidad en la
(Avance indicadores Se evalúa alto % gasto información sobre
de eficiencia) público resultados
Indicadores y escasa Información poco Información poco
Información poco Comprensible por
vinculación con el Comprensible por
Comprensible por ciudadanía
Presupuesto ciudadanía
ciudadanía
Escaso uso Evaluación por Escaso uso Evaluación por
Escaso uso Evaluación el Congreso
el Congreso
por el Congreso
20. La articulación entre la Planificación y el Proceso
Presupuestario debe ser revisada...
Indicadores de
Impacto Políticas
• Plan Nacional de Desarrollo:
Indicadores Impacto – País
• Indicadores Macro nivel país
articulados con metas a Estadísticas
Nacionales
– nivel sectorial ?
Tasas de disminución de la Pobreza y marginalidad PRIORIDADES
– Creación de empleo formal NACIONALES
– Indicadores de seguridad ciudadana
– Indicadores de Salud y Educación
• Planes Sectoriales
Indicadores
• IndicadoresIndicadores de Impacto a de los
de Impacto y resultados intermedios de Impacto y
Programas nivel sectorial con atribución
Resultado
PRIORIDADES
–
directa con los Programas ?
Tasas de Desnutrición PROGRASECTORIALES Intermedio
– Deserción escolar Programas
– Disminución de déficit viviendas, etc
Evaluaciones
de Impacto
Planificación Estratégica
• Planes Institucionales Institucional y Indicadores
de Objetivos Estratégicos FINES Y OBJETIVOS Indicadores
ESTRATEGICOS
• Indicadores alineadosEstratégicos Institucionales
de Objetivos con los de Impacto
INSTITUCIONALES
vinculados a Sectoriales?
los Programas Y resultado
intermedio
Programas
Indicadores de Gestión
• alineados con OE?
Programas Presupuestarios Indicadores
PROGRAMACION OPERATIVA de
Gestión
21. No hay mayor evidencia empírica de la
relación...Monitereo- Evaluación ....Mejoras Gestión..
• Débil relación entre Indicadores-
Monitoreo-Evaluación- Mejoras de la
Eficacia Asignativa, Eficiencia
Operacional, Mejoría provisión productos
Usuarios.....
22. Se mantienen ciertos mitos...
– Se fortalece “cultura de evaluación” v/s tiempos de
trabajo de los funcionarios e incentivos....
(Testimonios)
• “Si tuviera tiempo para trabajar, planificar..y no para llenar
formularios..Dra. Especialista en Nutrición”. Programa de Nutrición
del Ministerio de Salud
• “Si no puedo tener buenos indicadores y me expongo a no cumplir
(por razones no controlables.”invento”...subvalúo las metas,
etc...”Funcionario de Alto Nivel Jerárquico de
Ministerio...
23. Se mantienen ciertos mitos....
– Presentar indicadores no es rendir cuentas…
– (Testimonios…)
– En un país, los PAO´S con informes de indicadores
que van al Congreso tienen promedio 120 páginas
...
– ¿De que indicadores me hablan..? Informes
Emitidos../Informes Programados , etc.
24. Los indicadores como instrumentos de control....
• Las normativas de las leyes de
presupuesto, muchas veces conspiran
para que se monitoree lo innecesario...
A evaluar, evaluar que el mundo
se va a acabar.......
Una nueva enfermedad:
Indicadoritis....aguditis..monitoreos trimestrales
De metas físicas...
(Testimonios...)
Las metas de los indicadores...(PAO´s) sin relación con la formulación
Presupuestaria...desfase de la información
25. Sugerencias para mejorar los
indicadores como apoyo al PoR…..
1. Distintos Indicadores para distintos usos..Como
articular la información para la Toma de Decisiones
2. Integrar la Planificación Estratégica como fase previa
a la generación de indicadores de desempeño
institucional y programático.. Empoderar a los
responsables...
3. Algunas sugerencias metodológicas que apunten a la
simplicidad y la pertinencia del uso de los indicadores
4. Rendición de Cuentas más estratégica
26. 1. Distintos Indicadores para distintos usos..Como
articular la información para la Toma de
Decisiones
No todos los Indicadores deben ir en la
información anexa al Presupuesto...
• Monitoreo y Evaluación del Plan de Desarrollo o
grandes metas país
• Presupuesto
• Sistemas de información gerencial
• Sistemas de información operacional
27. INSUMO PROCESO PRODUCTO RESULTADO RESULTADO
INTERMEDIO
FINAL
CUAN BIEN LO HAY ALGUNA MEJORIA
CUANTOS HACEMOS QUE HACEMOS COMO CAMBIAN LOS
RECURSOS COMPORTAMIENTOS DE COMO CAMBIAN LAS
OCUPAMOS LA VARIABLE, USUARIOS CONDICIONES INICIALES
Costo por
Costos planilla vivienda Número de viviendas Porcentaje de viviendas con Disminución del
Costos unidades estándares de calidad en la déficit habitacional
I de productos Kilómetros normal Provincia X
Costo por
N kilómetro construidos
D Número de construido Porcentaje de viviendas con Porcentaje de usuarios
I funcionarios Inspecciones entorno urbano que reciben vivienda
Tiempo de realizadas mejorado declaran satisfacción
C Licitaciones por calidad y entorno
respuesta
A realizadas inspecciones
D
O Actividades Gasto
R administrativo/
E Gasto Total
Gasto
S
Ejecutado/Gasto
programado
T
Insumos Eficacia Eficacia (Cobertura, Eficacia
I Eficiencia (Cobertura, Focalización) Eficiencia
P Calidad Focalización) Eficiencia Calidad
O Inptus Economía Calidad Calidad
Sistema de Presupuesto Presupuesto Presupuesto Presupuesto
U Información (Productos
S Interna Finales) Sistema de Sistema de Información Sistema de
O Información
Entidades interna
Directivo Información
Sistema de Directivo
Información (Productos
I Contraloría intermedios,
N Interna
(Productos Productos finales, ORGANISMO DE
F. Intermedios) no relacionados PLANIFICACION
con
O.Estratégicos)
28. 2. Integrar La Planificacion Estratégica Al Sistema de M&E
RAZON DE SER DE LA ENTIDAD,
MISION FIN, PROPOSITO
PROPOSITOS
FUTURO, ESCENARIO DESEADO,
FUNDAMENTALES
VISION COMO QUIERE SER LA ENTIDAD
OBJETIVOS QUE ESPERA LOGRAR LA
ENTIDAD PARA CUMPLIR SU ANALISIS
MISION DEL MEDIO
ESTRATEGICOS
EXTERNO E
INTERNO
MEDIOS PARA LOGRAR LOS
ESTRATEGIAS OBJETIVOS ESTRATEGICOS
COMO
METAS o LINEAS DE ACCION
ESTRATEGICO
PROYECTOS, PROGRAMAS, CONCRECION DE LOS
PLAN
ACTIVIDADES
OBJETIVOS ESTRATEGICOS
PRESUPUESTO
MEDIDAS PARA ESTABLECER EL
INDICADORES GRADO DE CUMPLI MIENTO DE
LOS OBJETIVOS
29. 3. Algunas sugerencias metodológicas..simplicidad y
pertinencia
a. Necesidad de revisar el concepto de “metas
físicas” para ser incluidas como parte del
sistema de monitoreo y evaluación del
presupuesto (esto no significa que no se contabilicen…pero
tiene que ser esa la información que se adjunta al presupuesto ?)
• Genera problemas para la medición de producción
intangible o bienes genéricos e implica una sobre población
de indicadores
– Las experiencias internacionales de PoR más avanzadas no
tienen el concepto de meta física, sí el de productos (bienes y
servicios)
30. 3. Algunas sugerencias metodológicas..simplicidad y
pertinencia
b. Necesidad de sincerar las capacidades de
construcción de indicadores de eficiencia
– Para qué tipo de instituciones es
conveniente su generación y a qué nivel
Costos para la producción final e intermedia, producción tangible
e intangible ?
Quien usa la información sobre eficiencia
– Qué tipo de capacidades y sistemas es necesario
desarrollar para construir indicadores de eficiencia
31. 3. Algunas sugerencias metodológicas..simplicidad
y pertinencia
Si es tan difícil y estamos tan lejos para
medir resultados...orientémonos a
medir bien los Insumos, Productos y
los Procesos....
Algunos de sus defensores..
Makon
Shack
Shick......
Quirós...
32. 3. Algunas sugerencias metodológicas..simplicidad
y pertinencia
Pero no abandonemos los intentos de
generar y mejorar buenos indicadores de
resultados...intermedios y finales
(impactos)...
• Indicadores que permitan monitorear las
prioridades nacionales....y los
compromisos asociados a ellos...y sobre
todo indicadores que sean útiles para
generar acciones..mejoras..información
33. 3. Algunas sugerencias metodológicas..simplicidad
y pertinencia Lamentablemente en América Latina nos
cuesta definir PRIORIDADES ESTRATEGICAS
Aprender de las buenas prácticas de 15 Objetivos
Sectoriales e Institucionales....10,
Estratégicos..poco concretables
presupuesto orientado a resultados... las prácticas no
Se cometen la mayor parte de
aconsejables en evaluación:
• Apostar a la simplicidad de los modelos de
“No es posible ni deseable medirlo todo”
vinculación PrioridadesEvitar la trampa de la medición...
Gubernamentales...Gasto Público... posible mostrar”
“Haces solo lo que es
Indicadores con incentivos perversos
Asignación Eficiente y Responsabilización...
• Canadá
• Nueva Zelanda
• Reino Unido
34. 4. La Rendición de Cuentas debe ser más
estratégica.
• Informar lo que interesa conocer…
Cumplimiento de Metas físicas de productos?
• Mejoramiento del marketing del presupuesto..
Que información de desempeño y deseable y posible …?
Mayor expertise para presentación de “Informes
sobre Resultados” al Congreso y ciudadanos…
35. Estudio de Mejores Prácticas
Sistemas de M&E
Factores que deben ser potenciados
• Capacidad de empoderamiento a los
directivos
• Desarrollo de Sistemas de
Información
• Rendiciones de Cuentas en un
marco de participación ciudadana
36. Estudio de Mejores Prácticas
Sistemas de M&E
Factores que deben ser potenciados
• Debe haber una interconección entre el
alto nivel de decisión y el desempeño
operacional
• El Sistema de M&E debe incluir
Indicadores de desempeño
estratégicos en cascada desde el cuerpo
Directivo hacia los departamentos, los
indicadores operacionales apoyan a los
niveles de gestión senior.
