LA EVALUACION DE LAS POLITICAS DE GASTO Instituto de Estudios Fiscales Evaluaci ó n Prospectiva de...
-
Upload
ariadna-cirilo -
Category
Documents
-
view
218 -
download
0
Transcript of LA EVALUACION DE LAS POLITICAS DE GASTO Instituto de Estudios Fiscales Evaluaci ó n Prospectiva de...
LA EVALUACION DE LAS LA EVALUACION DE LAS POLITICAS DE GASTOPOLITICAS DE GASTOInstituto de Estudios FiscalesInstituto de Estudios Fiscales
Evaluación Prospectiva de Evaluación Prospectiva de Políticas PúblicasPolíticas Públicas
José Manuel AdánJosé Manuel Adán 23 Marzo 2009 23 Marzo 2009
MADRIDMADRID
22
INTRODUCCIONINTRODUCCION
• Evaluación Versus AuditoriaEvaluación Versus Auditoria• Evaluación en la normativa actualEvaluación en la normativa actual• Experiencia en otros paísesExperiencia en otros países• Evaluación de las políticas de gasto Evaluación de las políticas de gasto
y el Control Interno. Aplicación a I y el Control Interno. Aplicación a I + d + i+ d + i
• Programa 462MPrograma 462M• Grupo de Programas de GastoGrupo de Programas de Gasto• Grupo de Programas de Gasto por Grupo de Programas de Gasto por
Centros GestoresCentros Gestores• ConclusionesConclusiones
EP
GJ.M
. Ádán
33
II - - EVALUACIONEVALUACION
VERSUSVERSUS
AUDITORIAAUDITORIA
EP
GJ.M
. Ádán
44
EVALUACIONEVALUACION
• Señalar el Señalar el valor de algovalor de algo
• Estimar, apreciar, Estimar, apreciar, calcular el valor de calcular el valor de algoalgo
• Aptitudes y rendimiento de alumnosAptitudes y rendimiento de alumnos
EP
GJ.M
. Ádán
55
• AuditoriaAuditoria: “proceso sistemático de : “proceso sistemático de obtención y evaluación de obtención y evaluación de evidencia, de manera objetiva evidencia, de manera objetiva respecto de las afirmaciones respecto de las afirmaciones concernientes a concernientes a actos económicosactos económicos para determinar el grado de para determinar el grado de correspondencia entre tales correspondencia entre tales afirmaciones y criterios afirmaciones y criterios establecidosestablecidos
EP
GJ.M
. Ádán
66
Auditoria de eficacia, eficiencia Auditoria de eficacia, eficiencia
y economíay economía::
• Tipo de auditoria que tiene por objeto Tipo de auditoria que tiene por objeto comprobar que la entidad está comprobar que la entidad está adquiriendo, manteniendo y adquiriendo, manteniendo y empleandoempleando los recursos de manera los recursos de manera eficaz, económica y eficienteeficaz, económica y eficiente
EP
GJ.M
. Ádán
77
Auditoria de programasAuditoria de programas presupuestarios y planes presupuestarios y planes de actuación:de actuación:
• Tipo de auditoria que tiene por Tipo de auditoria que tiene por objeto comprobar el grado deobjeto comprobar el grado de eficaciaeficacia alcanzado en la consecución de losalcanzado en la consecución de los objetivosobjetivos previstos en los programas previstos en los programas y planes de actuación, así como de y planes de actuación, así como de lala legalidadlegalidad de las actuaciones de las actuaciones efectuadas en la ejecución de los efectuadas en la ejecución de los programas y planes de referencia.programas y planes de referencia.
EP
GJ.M
. Ádán
88
Auditoria operativa:Auditoria operativa:• Examen sistemático y objetivo de la evidencia, Examen sistemático y objetivo de la evidencia,
a fin de proporcionar una valoración a fin de proporcionar una valoración independiente de las operaciones de una independiente de las operaciones de una organización, programa, actividad o función organización, programa, actividad o función pública, suministrando información útil para la pública, suministrando información útil para la mejora de la rendición pública de cuentas y mejora de la rendición pública de cuentas y facilitando la toma de decisiones por aquellos facilitando la toma de decisiones por aquellos con responsabilidad de supervisión o con responsabilidad de supervisión o iniciación de acciones correctivas.iniciación de acciones correctivas.
• Aquella que engloba los objetivos de las Aquella que engloba los objetivos de las auditorias deauditorias de eficacia, economía y eficienciaeficacia, economía y eficiencia de programas presupuestarios y planes de de programas presupuestarios y planes de actuación y de sistemas y procedimientos de actuación y de sistemas y procedimientos de gestión financiera.gestión financiera.
EP
GJ.M
. Ádán
99
Auditoria operativaAuditoria operativa
• ∑ ∑ técnicas concernientes a auditorias técnicas concernientes a auditorias de eficacia, eficiencia y economía y de eficacia, eficiencia y economía y de programas.de programas.
• Incluye: examen de la legalidad, Incluye: examen de la legalidad, consecución de objetivos y medición consecución de objetivos y medición de la eficacia, eficiencia y economíade la eficacia, eficiencia y economía
EP
GJ.M
. Ádán
1010
•Auditoria operativaAuditoria operativa
Cubre todos los ámbitos que Cubre todos los ámbitos que pueden ser evaluados.pueden ser evaluados.
Con esta herramienta Con esta herramienta abarcamos campos de abarcamos campos de la evaluación..
EP
GJ.M
. Ádán
1111
EVALUACIONEVALUACION
VERSUSVERSUS
AUDITORIAAUDITORIA• EvaluaciónEvaluación: dirigida : dirigida
fundamentalmente a fundamentalmente a
OBJETIVOS, RESULTADOS Y OBJETIVOS, RESULTADOS Y AYUDAAYUDA
PARA MEJORARLOSPARA MEJORARLOSEP
GJ.M
. Ádán
1212
DIFERENCIAS:DIFERENCIAS:• Por sus orígenes
• Por el tipo de relaciones con los evaluadores
• Por las cuestiones que tratan
• Por la solidez de las instituciones
• Por el destino de las auditorias y las evaluaciones
• Por el tecnicismo reglado de los auditores
• Por el campo de actuación
• Por las técnicas a utilizar
• Por la contrastación de los resultados
• Por el grado de objetividad
EP
GJ.M
. Ádán
1313
Por sus orígenes:Por sus orígenes:
AuditoriaAuditoria ≡≡ más antigua más antigua
EvaluaciónEvaluación ≡≡ 1960 1960
criterios y clientes menos criterios y clientes menos identificadosidentificados
EP
GJ.M
. Ádán
1414
Por sus relaciones con los Por sus relaciones con los evaluadores:evaluadores:
Evaluación: intenta establecer relacionescooperativas e interactivas con los evaluados.
EP
GJ.M
. Ádán
1515
Por las cuestiones que tratan:Por las cuestiones que tratan:
Auditoria ------- responde a la Auditoria ------- responde a la pregunta QUÉpregunta QUÉ
Evaluación ---- intenta responder a Evaluación ---- intenta responder a la la pregunta POR pregunta POR QUÉQUÉ
EP
GJ.M
. Ádán
1616
Por la solidez de las instituciones:Por la solidez de las instituciones:
Las Instituciones Estatales de Las Instituciones Estatales de Auditoria tienen una gran ventaja Auditoria tienen una gran ventaja sobre los “primos” evaluadores sobre los “primos” evaluadores
(Estatuto, acceso, procedimiento, (Estatuto, acceso, procedimiento, …)…)
EP
GJ.M
. Ádán
1717
Por el destino de las auditorias y Por el destino de las auditorias y evaluacionesevaluaciones
- - AuditoriaAuditoria: conciben los : conciben los programas programas utilizando criterios utilizando criterios
definidos (volumen de definidos (volumen de recursos, relevancias recursos, relevancias
políticas) políticas)
- - EvaluaciónEvaluación: más libertad: más libertad
EP
GJ.M
. Ádán
1818
Por el tecnicismo reglado de los Por el tecnicismo reglado de los auditoresauditores
• Las auditorias operativas exigen más Las auditorias operativas exigen más destreza que una convencional de destreza que una convencional de contabilidad.contabilidad.
• Los evaluadores han de reunir Los evaluadores han de reunir equipos con conocimientos técnicos equipos con conocimientos técnicos para solucionar problemas para solucionar problemas especializadosespecializados
EP
GJ.M
. Ádán
1919
Por la relación con los evaluados y Por la relación con los evaluados y auditadosauditados
EP
GJ.M
. Ádán
2020
Por el campo de actuaciónPor el campo de actuación
Auditores = viaje a lo desconocido Auditores = viaje a lo desconocido o parcialmente desconocido.o parcialmente desconocido.
Evaluadores: evalúan solo lo que Evaluadores: evalúan solo lo que les han pedido que evalúen.les han pedido que evalúen.
EP
GJ.M
. Ádán
2121
Por las técnicas a utilizarPor las técnicas a utilizar
Aunque puede existir solapamiento Aunque puede existir solapamiento hay diferencias.hay diferencias.
Las auditorias: usan las Las auditorias: usan las entrevistas, planifican la entrevistas, planifican la auditoria, los informes son más auditoria, los informes son más directos. directos.
EP
GJ.M
. Ádán
2222
Por la contrastación Por la contrastación de los resultadosde los resultados• Los auditores elaboran informes Los auditores elaboran informes
provisionales (alegaciones) o provisionales (alegaciones) o definitivosdefinitivos
• Los evaluadores noLos evaluadores no
EP
GJ.M
. Ádán
2323
Por el grado de Por el grado de objetividadobjetividad• La auditoria “tradicional” ha La auditoria “tradicional” ha
sido más objetiva. La medida de sido más objetiva. La medida de EFICACIA, EFICIENCIA … mas EFICACIA, EFICIENCIA … mas subjetivasubjetiva
• La evaluación, en general es más La evaluación, en general es más subjetivasubjetiva
EP
GJ.M
. Ádán
2424
II - II - EVALUACIÓN EN LA EVALUACIÓN EN LA NORMATIVA NORMATIVA
ACTUALACTUAL
• Ley de Agencias Estatales Ley de Agencias Estatales ≡≡ Agencia de Evaluación Agencia de Evaluación ≡≡ control control de eficacia de eficacia ≡≡ responsabilización responsabilización de resultados de resultados ≡≡ realización de realización de evaluaciones de políticas y evaluaciones de políticas y programas públicos cuya gestión programas públicos cuya gestión corresponde a la AGEcorresponde a la AGE
EP
GJ.M
. Ádán
2525
•¿Qué políticas Públicas?¿Qué políticas Públicas?
≡ ≡ ¿Qué programas públicos?¿Qué programas públicos?
≡ ≡ ¿Políticas de gasto?¿Políticas de gasto?
EP
GJ.M
. Ádán
2626
Superación del ámbito estrictamenteSuperación del ámbito estrictamente
presupuestario, aún con estrecha presupuestario, aún con estrecha
REPRESENTACIÓN Y REPRESENTACIÓN Y PARTICIPACIÓN del PARTICIPACIÓN del
Ministerio de Economía y HaciendaMinisterio de Economía y Hacienda
≡ ≡ En el MEH sólo POLITICAS DE En el MEH sólo POLITICAS DE GASTOGASTO
- DIFERENCIA ENTRE POLITICA DIFERENCIA ENTRE POLITICA PUBLICA Y POLITICA DE GASTOPUBLICA Y POLITICA DE GASTO
EP
GJ.M
. Ádán
2727
- EVALUACION EN LA LEY GENERAL EVALUACION EN LA LEY GENERAL PRESUPUESTARIAPRESUPUESTARIA
- =“Principio de eficiencia en la =“Principio de eficiencia en la asignación de recursos” (art. 26)asignación de recursos” (art. 26)
- = Contenido de programas = Contenido de programas →→ indicadores de ejecución indicadores de ejecución →→ objetivos objetivos →→ “evaluación del resultado en “evaluación del resultado en términos de e.e.e.” (art. 29.6.e) términos de e.e.e.” (art. 29.6.e)
- Evaluación de las políticas de gasto = Evaluación de las políticas de gasto = el MEHel MEH impulsará y coordinará la impulsará y coordinará la evaluaciónevaluación continuada de las políticas continuada de las políticas de gasto (art. 72)de gasto (art. 72)
- El MEH puede realizar evaluaciones?El MEH puede realizar evaluaciones?EP
GJ.M
. Ádán
2828
• La Evaluación de las Políticas de La Evaluación de las Políticas de Gasto puede ser realizada por el Gasto puede ser realizada por el MEH MEH →→ IGAE IGAE →→ Auditorias Auditorias
• Era la única institución en la fecha Era la única institución en la fecha de la publicación de la LGPde la publicación de la LGP
• La Ley de Agencias no ha La Ley de Agencias no ha deshabilitado el art. 72deshabilitado el art. 72
EP
GJ.M
. Ádán
2929
OBJETIVOS DEL CONTROLOBJETIVOS DEL CONTROL
• Art. 142.1.c:Art. 142.1.c: EvaluarEvaluar que la actividad que la actividad y los procedimientos objeto de y los procedimientos objeto de control se realiza de acuerdo con los control se realiza de acuerdo con los principios de buena gestión principios de buena gestión financiera.financiera.
• (Evaluar como “técnica”)(Evaluar como “técnica”)
≡≡ función interventora función interventora →→ control control financiero permanente financiero permanente →→ Auditoria Auditoria públicapúblicaE
PG
J.M. Á
dán
3030
• Art. 142.1.d: VerificarArt. 142.1.d: Verificar el cumplimiento el cumplimiento de los objetivosde los objetivos asignados a los centros asignados a los centros gestores del gastogestores del gasto
•
→→ Función Función interventorainterventora
= IGAE = IGAE →→ Evalúa? Evalúa? →→ →→ Control financiero Control financiero
→→ AuditoriaAuditoria
EP
GJ.M
. Ádán
3131
• Evaluación por la IGAEEvaluación por la IGAE
• Evaluación por la D.G. de Evaluación por la D.G. de PresupuestosPresupuestos
DIFERENCIASDIFERENCIAS
EP
GJ.M
. Ádán
3232
• Control financiero permanente:Control financiero permanente:• Verificación continuada de ENTIDADES. Verificación continuada de ENTIDADES.
“Aspecto económico financiero” (art. “Aspecto económico financiero” (art. 157) 157) → ajuste a principios de buena → ajuste a principios de buena gestión financiera.gestión financiera.
• La Evaluación debe evaluar La Evaluación debe evaluar políticas, no Instituciones.políticas, no Instituciones.
• Auditoria operativa: examen Auditoria operativa: examen sistemático y objetivo de las sistemático y objetivo de las operaciones y procedimientos de una operaciones y procedimientos de una organización, programa, actividad o organización, programa, actividad o función pública con el objeto de función pública con el objeto de proporcionar una valoración proporcionar una valoración independiente de su racionalidad independiente de su racionalidad económicaeconómica..
EP
GJ.M
. Ádán
3333
• Clasificación funcional de NN.UU.Clasificación funcional de NN.UU.
01.01. Servicios GeneralesServicios Generales02. Defensa02. Defensa03. Orden Público y Seguridad03. Orden Público y Seguridad04. Asuntos económicos04. Asuntos económicos05. Protección medioambiental05. Protección medioambiental06. Vivienda y Servicios Comunitario06. Vivienda y Servicios Comunitario07. Sanidad07. Sanidad08. Ocio, cultura y religión08. Ocio, cultura y religión09. Educación09. Educación10. Protección Social10. Protección Social
EP
GJ.M
. Ádán
3434
• Evaluación de las políticas de gasto Evaluación de las políticas de gasto debe sustentarsedebe sustentarse
– Auditoria de ProgramasAuditoria de Programas Análisis de Análisis de la adecuación de los objetivos, la adecuación de los objetivos, evaluación del resultado (170.1).evaluación del resultado (170.1).
– Auditoria de Economía, eficacia, Auditoria de Economía, eficacia, eficienciaeficiencia - valoración del nivel de - valoración del nivel de e.e.e. alcanzado en la utilización de e.e.e. alcanzado en la utilización de los recursos públicos (170.3).los recursos públicos (170.3).
EP
GJ.M
. Ádán
3535
• R.D. 1552/2004, de 25 de JunioR.D. 1552/2004, de 25 de Junio
“ “El análisis yEl análisis y evaluación de las evaluación de las políticas de gastopolíticas de gasto, , que comprenden de que comprenden de forma expresa la consideración de sus forma expresa la consideración de sus aspectosaspectos sectoriales, territoriales y de sectoriales, territoriales y de su financiación,su financiación, así como el de la así como el de la propuesta de colaboración con otras propuesta de colaboración con otras AA.PP. en materia de financiación de AA.PP. en materia de financiación de inversiones u otra política de gasto inversiones u otra política de gasto ≡ ≡
Dirección General de Dirección General de PresupuestosPresupuestos
EP
GJ.M
. Ádán
3636
• La estructura de la DGP, al incluir la La estructura de la DGP, al incluir la EVALUACION en una Subdirección EVALUACION en una Subdirección General NO ES LA ADECUADAGeneral NO ES LA ADECUADA
• Si lo comparamos con la logística Si lo comparamos con la logística potencial de la recién creada Agencia potencial de la recién creada Agencia de Evaluación, se comprende mejor.de Evaluación, se comprende mejor.
• La DGP sólo evalúa para la Comisión La DGP sólo evalúa para la Comisión de Análisis de Programas.de Análisis de Programas.
EP
GJ.M
. Ádán
3737
• DGPDGP
IGAEIGAE
EP
GJ.M
. Ádán
3838
• Las políticas de gasto de la Orden EHA/Las políticas de gasto de la Orden EHA/1021/2007, de 13 de Abril:1021/2007, de 13 de Abril:
Justicia Justicia (7 programas)(7 programas)Defensa Defensa (7 programas)(7 programas)Seguridad ciudadana Seguridad ciudadana (11 programas)(11 programas)Política Exterior Política Exterior (5 programas)(5 programas)Pensiones Pensiones (7 programas)(7 programas)Otras prestaciones económicas Otras prestaciones económicas (3 programas)(3 programas)Servicios sociales y Promoción Social Servicios sociales y Promoción Social (12 (12 programas)programas)Fomento del empleo Fomento del empleo (2 programas)(2 programas)Desempleo Desempleo (1 programas)(1 programas)Acceso a la vivienda y fomento de la edificación Acceso a la vivienda y fomento de la edificación (4 programas)(4 programas)Gestión y administración de la Seguridad Social Gestión y administración de la Seguridad Social (2 programas)(2 programas)Sanidad Sanidad (13 programas)(13 programas)
EP
GJ.M
. Ádán
3939
Educación Educación (16 programas)(16 programas)Cultura Cultura (14 programas)(14 programas)Agricultura, Pesca y Alimentación Agricultura, Pesca y Alimentación (10 (10 programas)programas)Industria y Energía Industria y Energía (10 programas)(10 programas)Comercio, Turismo y Pymes Comercio, Turismo y Pymes (6 programas)(6 programas)Subvenciones al transporte Subvenciones al transporte (4 programas)(4 programas)Infraestructura Infraestructura (16 programas)(16 programas)Investigación, desarrollo e innovación Investigación, desarrollo e innovación (17 (17 programas)programas)Otras actuaciones de carácter económico Otras actuaciones de carácter económico (12 programas)(12 programas)Alta Dirección Alta Dirección (11 programas)(11 programas)Servicios de carácter general Servicios de carácter general (20 (20 programas)programas)Administración Financiera y Tributaria Administración Financiera y Tributaria (7 (7 programas)programas)Transferencias a otras Administraciones Transferencias a otras Administraciones Públicas Públicas (9 programas)(9 programas)Deuda Pública Deuda Pública (2 programas)(2 programas)
EP
GJ.M
. Ádán
4040
• Evaluación y Auditoria, siendo Evaluación y Auditoria, siendo técnicas distintas ¿sólo tiene soporte técnicas distintas ¿sólo tiene soporte jurídico la Auditoria en la LGP?jurídico la Auditoria en la LGP?
• Única posibilidad ante la inexistencia Única posibilidad ante la inexistencia de soporte adecuado para el de soporte adecuado para el desarrollo de la evaluacióndesarrollo de la evaluación
EP
GJ.M
. Ádán
4141
LEY DE AGENCIAS LEY DE AGENCIAS (18 de Julio (18 de Julio de 2006)de 2006)
• Surge al no ser suficiente la Surge al no ser suficiente la respuesta dada de intentar solucionar respuesta dada de intentar solucionar problemas de gestión con problemas de gestión con herramientas exclusivamente herramientas exclusivamente presupuestariaspresupuestarias..
EP
GJ.M
. Ádán
4242
• MEH MEH ≡ Políticas de Gasto≡ Políticas de Gasto Programas de Gasto Programas de Gasto
• AgenciaAgencia ≡ Políticas Públicas ≡ Políticas Públicas dede EvaluaciónEvaluación
• El resto ≡ Agencia de El resto ≡ Agencia de EvaluaciónEvaluación
EP
GJ.M
. Ádán
4343
ESTATUTO DE LA AGENCIA DE ESTATUTO DE LA AGENCIA DE EVALUACIÓNEVALUACIÓN
≡ ≡ desarrolla su actividad sin perjuicio de las desarrolla su actividad sin perjuicio de las competencias de otros órganoscompetencias de otros órganos
≡ ≡ promover la cultura de la evaluaciónpromover la cultura de la evaluación realizar trabajo de evaluación y análisis de realizar trabajo de evaluación y análisis de
programasprogramas proponer indicadores, ----proponer indicadores, ----≡ ≡ principios de independencia, transparencia, principios de independencia, transparencia,
cooperación interadministrativa, calidadcooperación interadministrativa, calidad
Hasta ahora carece del sustento normativo Hasta ahora carece del sustento normativo completo para realizar las evaluacionescompleto para realizar las evaluaciones
≡ ≡ Grandes competencias sin herramientas Grandes competencias sin herramientas adecuadasadecuadas
EP
GJ.M
. Ádán
4444
CONCLUSIONES PARCIALESCONCLUSIONES PARCIALES1.1. Dentro del ámbito del MEH, solo se pueden Dentro del ámbito del MEH, solo se pueden
realizar evaluaciones de políticas de gasto.realizar evaluaciones de políticas de gasto.2.2. Quien tiene la competencia directa es la DGP que Quien tiene la competencia directa es la DGP que
carece de los medios adecuados.carece de los medios adecuados.3.3. La evaluación como competencia de la IGAE se La evaluación como competencia de la IGAE se
ciñe más a la “actividad y procedimiento” y se ciñe más a la “actividad y procedimiento” y se ahorma dentro de las modalidades del control ahorma dentro de las modalidades del control interno. No obstante es el órgano que dispone de interno. No obstante es el órgano que dispone de un mayor aparato logístico para la realización de un mayor aparato logístico para la realización de la Evaluación.la Evaluación.
4.4. Es necesaria una acomodación normativa que Es necesaria una acomodación normativa que permita a la IGAE tener las competencias permita a la IGAE tener las competencias adecuadas para la Evaluación de las políticas de adecuadas para la Evaluación de las políticas de gasto. De otro modo se puede interpretar el art. gasto. De otro modo se puede interpretar el art. 72 de la LGP en el sentido lato y conceder a la 72 de la LGP en el sentido lato y conceder a la IGAE esta competencia de evaluar, pero en mi IGAE esta competencia de evaluar, pero en mi opinión es necesaria una base más clara y sólida.opinión es necesaria una base más clara y sólida.
5.5. La Agencia de Evaluación tiene unas La Agencia de Evaluación tiene unas competencias amplias y no habrá solape con la competencias amplias y no habrá solape con la evaluación ejecutada por el MEH siempre que se evaluación ejecutada por el MEH siempre que se centre en políticas públicas distintas a las de centre en políticas públicas distintas a las de gasto.gasto.
EP
GJ.M
. Ádán
4545
III - III - EXPERIENCIA EXPERIENCIA
INTERNACIONALINTERNACIONAL
-- EscasaEscasa– Países u organizaciones: UEPaíses u organizaciones: UE
EP
GJ.M
. Ádán
4646
LA ESCASA EXPERIENCIA EN LA ESCASA EXPERIENCIA EN OTROS PAISESOTROS PAISES• Australia (Australian National Audit Australia (Australian National Audit
Office, ANAO) Office, ANAO) • Finlandia (Vaitionouden Finlandia (Vaitionouden
Tarkastusvirasto, Oficina del Auditor del Tarkastusvirasto, Oficina del Auditor del Estado)Estado)
• Irlanda (Officce of the Comptroller and Irlanda (Officce of the Comptroller and Auditor General)Auditor General)
• Noruega (Rikssevisjonen, Auditoria del Noruega (Rikssevisjonen, Auditoria del Estado)Estado)
• Países Bajos (Tribunal de Auditores)Países Bajos (Tribunal de Auditores)
EP
GJ.M
. Ádán
4747
La Evaluación en la Union EuropeaLa Evaluación en la Union EuropeaCuestionario Inicial (2003)Cuestionario Inicial (2003)
1ª. ¿En qué parte del sector público se lleva a cabo la 1ª. ¿En qué parte del sector público se lleva a cabo la evaluación?evaluación?
2ª. ¿Qué coordinación de las actividades de 2ª. ¿Qué coordinación de las actividades de evaluación tiene lugar a lo largo de la evaluación tiene lugar a lo largo de la administración y quien es el responsable?.administración y quien es el responsable?.
3ª. ¿Cuál es el foco de la evaluación en su país?3ª. ¿Cuál es el foco de la evaluación en su país?4ª. ¿Cuántos tipos de evaluación se llevan a cabo?4ª. ¿Cuántos tipos de evaluación se llevan a cabo?5ª. ¿Por qué se llevan a cabo las evaluaciones?5ª. ¿Por qué se llevan a cabo las evaluaciones?6ª. ¿Los afectados en la evaluación están 6ª. ¿Los afectados en la evaluación están
involucrados o son consultados y en qué etapa?.involucrados o son consultados y en qué etapa?.7ª. ¿Cómo se utilizan los resultados de la evaluación?.7ª. ¿Cómo se utilizan los resultados de la evaluación?.8ª. ¿Qué seguimiento se hace de las evaluaciones?.8ª. ¿Qué seguimiento se hace de las evaluaciones?.9ª. ¿Qué medidas se llevan a cabo para estructurar la 9ª. ¿Qué medidas se llevan a cabo para estructurar la
capacidad de evaluar?.capacidad de evaluar?.10ª. ¿Hasta qué punto las evaluaciones son 10ª. ¿Hasta qué punto las evaluaciones son
planeadas anticipadamente?planeadas anticipadamente?
EP
GJ.M
. Ádán
4848
1º. ¿En que parte …?1º. ¿En que parte …?- En los Ministerios - En los Ministerios → → modelo descentralizadomodelo descentralizado
- Si se añaden las autoridades regionales – - Si se añaden las autoridades regionales – nono
UE = Cada D.G. es responsable de evaluar su UE = Cada D.G. es responsable de evaluar su actividad.actividad.
2º. ¿Qué coordinación …?2º. ¿Qué coordinación …?- M.H. principalmente.- M.H. principalmente.
UE cada D.G. La D.G. de Presupuesto UE cada D.G. La D.G. de Presupuesto coordina coordina
3º. ¿Cuál es el foco …?3º. ¿Cuál es el foco …?- Diversidad - Diversidad →→ economía economía
→→ eficiencia eficiencia ≡≡ U.E. U.E. → → eficaciaeficacia
La Evaluación en la UELa Evaluación en la UE
EP
GJ.M
. Ádán
4949
4º. ¿Cuántos tipos …?4º. ¿Cuántos tipos …?- No fué posible una respuesta común - No fué posible una respuesta común válida válida- U.E. contestó numéricamente- U.E. contestó numéricamente
5º. ¿Por qué se llevan a cabo?5º. ¿Por qué se llevan a cabo?- Requerimiento presupuestario- Requerimiento presupuestario- Solo Estonia contestó “… como - Solo Estonia contestó “… como HERRAMIENTA del gestor. HERRAMIENTA del gestor.U.E.U.E.→ → R.Financiero (Art. 27,28 y 33) R.Financiero (Art. 27,28 y 33)Gestión + Presupuestos.Gestión + Presupuestos.En la Programación y Planificación En la Programación y Planificación
estratégica los resultados del ciclo de estratégica los resultados del ciclo de evaluación, impacto esencial para análisis evaluación, impacto esencial para análisis de objetivos políticos y asignación de de objetivos políticos y asignación de recursos.recursos.
La Evaluación en la UELa Evaluación en la UE
EP
GJ.M
. Ádán
5050
6º. ¿Los afectados en la evaluación 6º. ¿Los afectados en la evaluación están involucrados …?están involucrados …?≡ ≡ Fundamentalmente al final en la Fundamentalmente al final en la comprobación de resultados.comprobación de resultados.
7º. ¿Cómo se utilizan los resultados …?7º. ¿Cómo se utilizan los resultados …?≡ ≡ Dentro del M.H.Dentro del M.H.UE UE ≡≡ Establecimiento de prioridades Establecimiento de prioridades políticaspolíticas
8º. ¿Qué seguimiento …?8º. ¿Qué seguimiento …?≡ ≡ para ser públicas y disponiblespara ser públicas y disponibles
UE UE ≡≡ públicas públicas
La Evaluación en la UELa Evaluación en la UE
EP
GJ.M
. Ádán
5151
9º. ¿Qué medidas …?9º. ¿Qué medidas …?- Respuestas diversas (recursos - Respuestas diversas (recursos financieros, humanos)financieros, humanos)U.E. U.E. ≡≡ Responsabilidades definidas, Responsabilidades definidas, procedimiento de mejora.procedimiento de mejora.
10º. ¿Hasta que punto se planifica 10º. ¿Hasta que punto se planifica anticipadamente?anticipadamente?- En el M.H. la mayoría- En el M.H. la mayoríaU.E. U.E. ≡≡ Programa Multianual de Programa Multianual de Evaluación establecido a finales de Evaluación establecido a finales de 20032003
Programa anual de EvaluacionesPrograma anual de Evaluaciones
La Evaluación en la UELa Evaluación en la UE
EP
GJ.M
. Ádán
5252
La Evaluación en la UE La Evaluación en la UE
Conclusiones Parciales Conclusiones Parciales (test)(test)
1ª. El modelo más común en los Estados Miembros 1ª. El modelo más común en los Estados Miembros concerniente a las actividades de evaluación es una concerniente a las actividades de evaluación es una combinación de las llevadas a cabo en el Ministerio combinación de las llevadas a cabo en el Ministerio de Hacienda y en otros Ministerios.de Hacienda y en otros Ministerios.
2ª. La coordinación de las actividades de evaluación 2ª. La coordinación de las actividades de evaluación tiene lugar en las mayoría de los Estados Miembros tiene lugar en las mayoría de los Estados Miembros con un énfasis singular del Ministerio de Hacienda.con un énfasis singular del Ministerio de Hacienda.
3ª. La respuesta al foco de la evaluación no permite 3ª. La respuesta al foco de la evaluación no permite alcanzar ninguna conclusión.alcanzar ninguna conclusión.
4ª. El resultado del cuestionario no permite un cuadro 4ª. El resultado del cuestionario no permite un cuadro completo de los diferentes tipos de evaluación completo de los diferentes tipos de evaluación llevados a cabo por los Estados Miembros.llevados a cabo por los Estados Miembros.
5ª. Los 17 Estados Miembros respondieron que llevan 5ª. Los 17 Estados Miembros respondieron que llevan a cabo evaluaciones por requerimientos ligados a a cabo evaluaciones por requerimientos ligados a las actividades financiadas por la UE y era las actividades financiadas por la UE y era solamente la única razón por la que la llevaban a solamente la única razón por la que la llevaban a cabo 4 Estados Miembros.cabo 4 Estados Miembros.
EP
GJ.M
. Ádán
5353
La Evaluación en la UELa Evaluación en la UELa Evaluación de Políticas en la La Evaluación de Políticas en la UEUE
• Evaluación “Judgement of interventions Evaluación “Judgement of interventions according to their results, impacts and according to their results, impacts and needs they aim to satisfy”needs they aim to satisfy”
• ““Juicio de las intervenciones en Juicio de las intervenciones en relación con sus resultados, impactos y relación con sus resultados, impactos y las necesidades que dichas las necesidades que dichas intervenciones quieren satisfacer”intervenciones quieren satisfacer”
• ≡ ≡ proceso que culmina con un juicio proceso que culmina con un juicio sobre una acciónsobre una acción
• Foco: necesidad, resultados, impactosFoco: necesidad, resultados, impactosEP
GJ.M
. Ádán
5454
Principales razones para EVALUARPrincipales razones para EVALUAR
• Contribuir al diseño de las Contribuir al diseño de las intervenciones, suministrando ideas intervenciones, suministrando ideas para establecer para establecer prioridades políticasprioridades políticas..
• Ayudar en la asignación eficiente de Ayudar en la asignación eficiente de los recursos.los recursos.
• Mejorar la calidad de las Mejorar la calidad de las intervenciones.intervenciones.
• Informar sobre los logros de las Informar sobre los logros de las intervenciones.intervenciones.
La Evaluación en la UELa Evaluación en la UELa Evaluación de Políticas en la La Evaluación de Políticas en la UEUE
EP
GJ.M
. Ádán
5555
La Evaluación en la UELa Evaluación en la UE EVALUACION VS AUDITORIAEVALUACION VS AUDITORIALo que controlamos
En lo que influimos directamente
En lo que influimos indirectamente
Inputs Outputs ResultadoImpactos intermedios
Impactos globales
Auditoría
Supervisión
Evaluación
aplicación
EP
GJ.M
. Ádán
5656
Evaluación de Políticas en la Evaluación de Políticas en la UEUEDiferencias entre Diferencias entre EVALUACIÓN Y AUDITORIAEVALUACIÓN Y AUDITORIA• AUDITORIAAUDITORIA
• Engloba el examen y Engloba el examen y consejo sobre la consejo sobre la adecuación y efectividad adecuación y efectividad de los sistemas de control de los sistemas de control interno de las Direcciones interno de las Direcciones Generales.Generales.
• La auditoria por resultados La auditoria por resultados tiende a centrarse en la tiende a centrarse en la ejecución de una actividad ejecución de una actividad y sus efectos.y sus efectos.
• Auditoria Auditoria ≡ Examina ≡ Examina como se conceden las como se conceden las becasbecas
• EVALUACIONEVALUACION
• Valoración de resultados con Valoración de resultados con respecto a los efectos de una respecto a los efectos de una intervenciónintervención
• Como resultados e impactos Como resultados e impactos están condicionados por los están condicionados por los mecanismos de aplicaciónmecanismos de aplicación
• Evaluación Evaluación ≡ Examina el ≡ Examina el impacto y resultados de la impacto y resultados de la concesión de becasconcesión de becas
EP
GJ.M
. Ádán
5757
La Evaluación de Politicas La Evaluación de Politicas en la UEen la UE• Diferencia entre GASTO y NO GASTO, cada Diferencia entre GASTO y NO GASTO, cada
vez más irrelevante.vez más irrelevante.• Política: estrategia global dirigida por Política: estrategia global dirigida por
diferentes diferentes instrumentos políticosinstrumentos políticos (conjunto (conjunto de técnicas mediante las cuales las de técnicas mediante las cuales las autoridades públicas intentan asegurar autoridades públicas intentan asegurar apoyo y efectos o prevenir cambios apoyo y efectos o prevenir cambios sociales).sociales).
• Puede tener diferentes niveles de Puede tener diferentes niveles de complejidad complejidad ≡ desde una estrategia global ≡ desde una estrategia global de la Comisión o meta sobre un área de la Comisión o meta sobre un área política hasta una actividad presupuestaria.política hasta una actividad presupuestaria.
• Normalmente abarcará una serie de Normalmente abarcará una serie de instrumentos (legislación, recursos, planes instrumentos (legislación, recursos, planes de de acción)acción)
EP
GJ.M
. Ádán
5858
La Evaluación de Políticas en la La Evaluación de Políticas en la UEUE Aspectos de los Efectos de Aspectos de los Efectos de las Políticaslas Políticas
• Como se aplican los instrumentos Como se aplican los instrumentos políticos.políticos.
• A quien afectaA quien afecta
• Como la intervención se piensa que Como la intervención se piensa que debe comportarse y como se debe comportarse y como se comportacomporta
• Efectos de la intervención (por qué Efectos de la intervención (por qué produce ciertos efectos y no otros)produce ciertos efectos y no otros)
EP
GJ.M
. Ádán
5959
La Evaluación de las Políticas La Evaluación de las Políticas en la UEen la UE• 1 área política1 área política• 4 Actividades 4 Actividades ≡ A≡ A con 2 programa de con 2 programa de
gastogasto ≡ ≡ A con 2 A con 2 medidas medidas
sin gastosin gasto ≡ ≡ 2A 2A mezclamezcla
Ej.: U.E. Ej.: U.E. ≡ medida regulatoria (actividad b-1)≡ medida regulatoria (actividad b-1) objetivo de la directiva ≡ mejorar la objetivo de la directiva ≡ mejorar la
calidad del aire (impacto) a través calidad del aire (impacto) a través de la de la reducción de las actividades de reducción de las actividades de polución polución (resultados). (resultados).
Output de intervención Ej.: multas Output de intervención Ej.: multas por incumplimiento, impuestos, cargas, por incumplimiento, impuestos, cargas, limites cuantitativos a la polución …limites cuantitativos a la polución …
6060
POLITICA APOLITICA A
Actividad aActividad a Output 1Output 1 Resultado 1Resultado 1
InversionesInversiones
(Subvenciones)(Subvenciones) Impacto 1Impacto 1
ConcienciaciónConcienciación Output 2Output 2 Resultado 2Resultado 2
(contratista externo)(contratista externo)
Actividad bActividad b Output 3Output 3
1. Medidas Regulatorias1. Medidas Regulatorias Output 4Output 4
(Directiva del Consejo)(Directiva del Consejo) Impacto 2Impacto 2
2. Proyecto Piloto2. Proyecto Piloto Output5Output5 Resultado 3Resultado 3 Impacto totalImpacto total
(Contratista Externo)(Contratista Externo)
Actividad cActividad c
Regulación transitoriaRegulación transitoria Output 6Output 6
(Acuerdos sectoriales)(Acuerdos sectoriales) Resultado 4Resultado 4 Impacto 3Impacto 3
ApoyoApoyo Output 7Output 7
(Subvenciones)(Subvenciones)
Estudio de viabilidadEstudio de viabilidad
(Contratista externo)(Contratista externo) LeyendaLeyenda
Actividad dActividad d Resultado 5Resultado 5 GastoGasto
ConvenioConvenio Output 8Output 8 No gastoNo gasto
Cooperación internacionalCooperación internacional
Factores exógenos institucionales, geográficos, medio-ambiente, socio-económicos que tienen lugar a nivel de resultados y de impacto.
Contexto Institucional
6161
IVIV - - LA EVALUACIÓN DE LAS LA EVALUACIÓN DE LAS POLÍTICAS DE GASTO Y POLÍTICAS DE GASTO Y
LA LA AUDITORIAAUDITORIA• Política de Gasto: I+d+i (Investigación, desarrollo Política de Gasto: I+d+i (Investigación, desarrollo
e innovación)e innovación)- Programas de gasto: 17- Programas de gasto: 17- Órganos gestores: 38- Órganos gestores: 38- Intervenciones Delegadas: 10- Intervenciones Delegadas: 10- Divisiones ONA:- Divisiones ONA: 1 1
• Programas:Programas:- 462M Investigación y estudios sociológicos y - 462M Investigación y estudios sociológicos y constitucionalesconstitucionales- 462N Investigación y estudios estadísticos y - 462N Investigación y estudios estadísticos y económicoseconómicos- 463A Investigación científica- 463A Investigación científica- 463B Fomento y coordinación de la investigación - 463B Fomento y coordinación de la investigación científica y técnicacientífica y técnica
EP
GJ.M
. Ádán
6262
La Evaluación de las Políticas La Evaluación de las Políticas de de Gasto y la Gasto y la AuditoriaAuditoria
- 464A Fomento y coordinación de la investigación - 464A Fomento y coordinación de la investigación científica y técnicacientífica y técnica- 465A Investigación sanitaria- 465A Investigación sanitaria- 466A Investigación y evaluación educativa- 466A Investigación y evaluación educativa- 467A Astronomía y astrofísica- 467A Astronomía y astrofísica- 467B Investigación y experimentación de Obras - 467B Investigación y experimentación de Obras Públicas y TransportePúblicas y Transporte
- 467C Investigación y desarrollo tecnológico-- 467C Investigación y desarrollo tecnológico-industrialindustrial- 467D Investigación y experimentación agraria- 467D Investigación y experimentación agraria- 467E Investigación oceanográfica y pesquera- 467E Investigación oceanográfica y pesquera- 467F Investigación geológico-minera y - 467F Investigación geológico-minera y medioambientalmedioambiental- 467G Investigación y desarrollo de la Sociedad - 467G Investigación y desarrollo de la Sociedad de la Informaciónde la Información- 467H Investigación energética, mdioambiental y - 467H Investigación energética, mdioambiental y tecnológicatecnológica- 467I Innovación tecnológica de las - 467I Innovación tecnológica de las telecomunicacionestelecomunicaciones
6363
Política de gasto: Investigación, Política de gasto: Investigación, desarrollo e innovacióndesarrollo e innovación
PROGRAMASPROGRAMAS ORGANO GESTORORGANO GESTOR Intervención Intervención DelegadaDelegada
462M Investigación y 462M Investigación y estudios estudios sociológicos y sociológicos y constitucionalesconstitucionales
CENTRO DE CENTRO DE ESTUDIOS POLITICOS ESTUDIOS POLITICOS Y Y CONSTITUCIONALESCONSTITUCIONALES
Intervención Intervención Delegada Ministerio Delegada Ministerio de la Presidenciade la Presidencia
CENRO DE CENRO DE INVESTIGACIONES INVESTIGACIONES SOCIOLÓGICASSOCIOLÓGICAS
Intervención Intervención Delegada Ministerio Delegada Ministerio de la Presidencia de la Presidencia
462N Investigación y 462N Investigación y estudios estadísticos y estudios estadísticos y económicoseconómicos
INSTITUTO DE INSTITUTO DE ESTUDIOS FISCALESESTUDIOS FISCALES
Intervención Intervención Delegada Ministerio Delegada Ministerio de Economía y de Economía y HaciendaHacienda
463A Investigación 463A Investigación científicacientífica
Mº. EDUCACION Y Mº. EDUCACION Y CIENCIACIENCIA
Intervención Intervención Delegada Ministerio Delegada Ministerio Educación y CienciaEducación y Ciencia
CONSEJO SUPERIOR CONSEJO SUPERIOR DE INVESTIGACIONES DE INVESTIGACIONES CIENTÍFICASCIENTÍFICAS
Intervención Intervención Delegada en el Delegada en el Consejo Superior de Consejo Superior de Investigaciones Investigaciones CientíficasCientíficas
EP
GJ.M
. Ádán
6464
POLITICA DE GASTO: Investigación, Desarrollo e InnovaciónPOLITICA DE GASTO: Investigación, Desarrollo e Innovación
PROGRAMASPROGRAMAS
Objetivo Objetivo 11
Resultado Resultado 11
462M462M - Investigación - Investigación y estudios y estudios sociológicos y sociológicos y constitucionalesconstitucionales
Impacto Impacto 11
Objetivo Objetivo 22
Resultado Resultado 22
462N Investigación y 462N Investigación y estudios estadísticos estudios estadísticos y económicosy económicos
Objetivo Objetivo 33
Resultado Resultado 33
Impacto Impacto 22
Objetivo Objetivo 44
Resultado Resultado 44
Impacto Impacto totaltotal
463A Investigación 463A Investigación científicacientífica
Impacto Impacto 33
Objetivo Objetivo 55
Resultado Resultado 55
463B Fomento y 463B Fomento y coordinación de la coordinación de la investigación investigación científica y técnicacientífica y técnica
Objetivo Objetivo 66
Resultado Resultado 66
Impacto Impacto 44
464A Investigación y 464A Investigación y estudio de las estudio de las Fuerzas ArmadasFuerzas Armadas
Objetivo Objetivo 77
Resultado Resultado 77
Objetivo Objetivo 88
Resultado Resultado 88
Impacto Impacto 55
Objetivo Objetivo 99
Resultado Resultado 99
6565
CONCLUSIONESCONCLUSIONES
1.1. Evaluación y Auditoria son técnicas Evaluación y Auditoria son técnicas distintasdistintas
2.2. Es necesario un ajuste normativo para Es necesario un ajuste normativo para permitir al control interno la realización permitir al control interno la realización de las evaluaciones de las políticas de de las evaluaciones de las políticas de gasto.gasto.
3.3. La técnica de la evaluación a partir de La técnica de la evaluación a partir de las auditorias es muy compleja pero se las auditorias es muy compleja pero se considera las más eficaz.considera las más eficaz.
4.4. Las auditorias de programas y las Las auditorias de programas y las operativas, son las herramientas más operativas, son las herramientas más eficaces para lograr evaluaciones eficaces para lograr evaluaciones basadas en auditorias.basadas en auditorias.
5.5. No existe experiencia internacional No existe experiencia internacional suficiente en evaluaciones realizadas suficiente en evaluaciones realizadas por órganos de controlpor órganos de control..
EP
GJ.M
. Ádán