ponencia econometria

Download Ponencia econometria

Post on 30-Jul-2015

293 views

Category:

Documents

3 download

Embed Size (px)

TRANSCRIPT

1. 24 al 26 de noviembre del 2010, Len, Guanajuato, MxicoY Esa inversin s tiene impacto? Mara Gloria Cano Socia-consultora Econometra S.A. 2. Tipos de evaluacin en el procesoSeguimiento yevaluaciones intermediasMejoras al diseoExperiencias Formulacin Diseo y delIntervencin anteriores Estratgica Programa del Programa Aprendizajes evaluacin exEvaluacinDiagnosticoEx post ante Valoracin informacin social del (Lnea de Base) Situacin Programadespus del ProgramaSituacin sin ProgramaMejoramiento devariables objetivo 3. Diagnsticos y evaluaciones intermedias Tasa bruta de matrcula de educacin superior en 2006La distribucin social de la matrcula muestra una alta concentracin de acceso a laeducacin superior en los quintiles ms altos. La tasa bruta de matrcula de educacinsuperior es menos del 20% en el quintil 3, y la mitad en el quintil 2. CINDA, PROYECTO INFORMELA EDUCACION SUPERIOR EN IBEROAMERICA , 20068070605040302010012 3 45Fuente DANE Encuesta de Calidad de Vida 2003 4. Diagnsticos y evaluaciones intermediasInadecuada estructura de la oferta de educacin superior en 2006 frente a las necesidades de la economaAltagerencia 4.3% posgrado Gerencia 70%media universitario Tcnica mando 30%13% Tecnlogo medio TcnicaTcnicoespecializada 12%profesionalTrabajadores12 Tcnico profesional calificadosTrabajadoresEgresado educacin media semicalificados 60%Egresado educacin bsica yTrabajadores no calificados media 5. Diagnsticos y evaluaciones intermediasEstrategias para el financiamiento de la demanda ymejoramiento de la equidadDisminucin de la desercin estudiantil en educacin superiorAdecuacin y flexibilizacin de la oferta de educacin superiorEstrategias para mejoras de calidadEstrategias para aumentar la pertinencia Plan Sectorial 2006-2010 6. Diagnsticos y evaluaciones intermediasQu tan bien estamos focalizando?El 65% de los beneficiarios se encuentra por debajo de este umbral. Un 15% de los nopobres, se alejan apenas un 10% de la LP, mientras que un 20% se encuentran muy porencima de la misma.DISTRIBUCIN DE LOS BENEFICIARIOS ACCES SEGN LNEA DE POBREZA2000Linea de pobreza - MERPD1600Proxy ingreso percapita beneficiarios Miles de $1200800 El 65% de los hogares se encuentran encondicin de pobreza4000 FUENTE: UT Econometra SEI encuesta de verificacin de beneficiarios de ACCES 2006 y ECV/03 7. Los grupos de indicadores segn el tipo de evaluacinLos tipos de evaluacin se desarrollan a partir de tres grupos deindicadores: Indicadores de Gestin o de Proceso: miden la manera en quese ha desarrollando una actividad o estrategia en particular. Indicadores de Resultado o de Producto: estiman la incidenciadel proyecto o programa sobre sus objetivos. Indicadores de Impacto o de Efecto: cuantifican lasexternalidades generadas sobre los actores involucrados en elproyecto o programa (individuos, familias, comunidades oinstituciones). 8. Cul es el papel de la informacin? Cuando se disea una evaluacin o un mecanismo deseguimiento, se deben formular indicadores que permitanmedir adecuadamente los aspectos que se deben medir parasaber si lo planeado se cumple Actividades del proceso deVariables que Indicadores deintervencin caracterizan elgestin o procesoprocesoVariables queIndicadores de Productos de las caracterizan los resultados o actividadesproductos productoObjetivos sobre la Variables que seIndicadores de poblacin pretende afectar impacto o efectobeneficiaria 9. Qu diferencia hay entre evaluaciones de resultados y de impacto? Las evaluaciones de resultados buscar verificar la obtencin delos productos de las actividades de la intervencin.Entendiendo como producto lo que se obtiene de la actividad yes controlable por quien la ejecuta. La evaluacin de impacto busca comparar la situacin de unbeneficiario, con la situacin que tendr si la intervencin nohubiese existido. A esa situacin hipottica se le conoce comoescenario contrafactual y no siempre es fcil estimarla. Los impactos o efectos derivados de la intervencin quepueden estar afectados por decisiones y caractersticas de losbeneficiarios. Estos efectos pueden ser esperados o noesperados. 10. Cules son los pasos para realizar una evaluacin de impacto? 11. Paso 1: Anlisis de los objetivos Para esto es importante preguntarse: Cul es la unidad de intervencin de la poltica?Sobre quin o quines acta? a quin quiere cambiar o mantener su situacin actual? Cual es la variable que se quiere impactar? Sobre cul o cules caractersticas de la unidad de intervencin se busca actuar? En que direccin y proporcin se esperan los cambios?Paso 2: Anlisis de la teora subyacenteToda intervencin supone que existen unos mecanismos (teorasubyacente) que transmiten efectos entre las acciones deintervencin y el logro de los objetivos. 12. Paso 3: Preguntas de evaluacin Cules efectos evaluar? Qu se quiere saber de los efectos?Paso 4: Seleccin de indicadores Deben definirse varios tipos de indicadores: Indicador de intervencin o participacin: en genero es dictomo. (Y) Indicador de impacto: debe estar directamente relacionado con el efecto que se quiere medir. (X) Indicadores de factores exgenos: Representan variables de la unidad de intervencin y de su entorno, as como otras intervenciones. No son influidos por los anteriores indicadores (impacto y participacin) pero que influyen en al menos uno de ellos . (Z)Y = f(X, Z, e) 13. Paso 4: Seleccin de indicadoresQu tipo de modelo de evaluacin es aplicable? Depende del tipo de intervencin, sus caractersticas de cobertura, la existencia o no de lnea de base, la seleccin de los beneficiarios y las variables de impacto a medir. valor observado Beneficios estimadosprediccinprediccisin programaInformacin HistricaInformaci HistInformacin HistricaInformaci Hist con programasin programa Ao 14. Paso 4: Seleccin de indicadores Cmo poder medir la situacin con y sin intervencin?Cuando no se puede realizar un diseo experimental, es una buena ideacontar con informacin de lnea de base. Es decir, observar los indicadoresde evaluacin antes y despus de la intervencin, tanto para la muestra detratamiento como para la muestra de control.participantesBeneficiosno participanresAoInicio del programa 15. Paso 4: Seleccin de indicadores Cuando existe diferencia inicial entre tratamiento y control Diferencia neta= Beneficio.participantesDiferenciainicial. Diferencia final. No participantes Antes Durante el Programa Ao primeraltima medicin medicinmedici medici Cuando no se puede hacer un diseo experimental pero se cuenta con la posibilidad de medir las variables antes de la intervencin (lnea de base), hacer las diferencias de las diferencias permite controlar el efecto de otras variables no observables que son comunes a los controles y a los tratamientos. 16. Paso 5: Recoleccin de InformacinFormatos y Formularios Diseo de InstrumentosCaptura y sistematizacin Diseo Metodolgico Tipo de muestreoDiseo muestralTamao de la muestraRecursos RequeridosDiseo operativo Rutas y Plan de CampoCosteo / Presupuesto Operativo de CampoInformacin SecundariaAplicacin de EncuestasInformacin PrimariaObservacin y medicinEntrevistas, Talleres, etc. 17. EJEMPLO DE IMPACTO DEL CRDITO SOBRE LA PERMANENCIA Y DESEMPEO ACADMICOIntervencin: Crdito educativo con tasa de inters subsidiadafocalizado a poblacin de menores recursos.Variables a medir: Permanencia Desempeo acadmico Vinculacin laboral Nivel salarialModelo: Diferencia entre poblacin tratamiento y control 18. EJEMPLO DE IMPACTO Metodologa para la evaluacin de beneficiosIndicadores de medicin de impactoSituacin con elImpacto delingreso al ProyectoProyecto Ingresos laborales ACCES futuros Retencin en laSituacin educacin superiorsinproyecto Mayores ingresos tributariosTiempoLnea de Medicin MedicinBase de trmino final de2008 medioimpactos 19. EJEMPLO DE IMPACTO TASA DE DESERCIN BENEFICIARIOS Y NO BENEFICIARIOS DE UNO O MSDESEMBOLSOS POR SEMESTRE (2008)45,0%40,0%35,0%30,0%25,0%20,0%15,0%10,0% 5,0% 0,0% Tercero CuartoQuintoSexto Sptimo BeneficiariosNo beneficiariosFuente: CEDE; 2008 20. EJEMPLO DE IMPACTOPROPORCIN DE MATERIAS APROBADAS POR LOS BENEFICIARIOS YNO BENEFICIARIOS EN INSTITUCIONES PRIVADAS (2008)95,0%90,0%85,0%80,0%75,0%70,0%65,0%60,0%Primero Segundo Tercero Cuarto Quinto Sexto Sptimo Octavo Noveno DcimoBeneficiarios No beneficiarios Fuente: CEDE; 2008 21. EJEMPLO DE IMPACTOPROPORCIN DE BENEFICIARIOS Y NO BENEFICIARIOS YA GRADUADOS QUECOTIZAN SEGURIDAD SOCIAL POR NIVEL EDUCATIVO (2008) 100,0%90,0%80,0%70,0%60,0%50,0%40,0%30,0%20,0%10,0% 0,0%Beneficiarios No beneficiariosFuente: Estimaciones de Econometra a partir de ICETEX-OLE-PILA, DANE; ECV (2008). 22. EJEMPLO DE IMPACTO INGRESO BASE DE COTIZACIN POR NIVEL DE LA IES DEDONDE SE HA GRADUADO (PESOS) 3.000.000 2.500.000 2.000.000 1.500.000 1.000.000500.000- 1.Tcnica profesional 2.Tecnolgica 3.Universitaria 4.Especializacin 5.Maestria BeneficiariosFuente: Estimaciones de Econometra a partir de ICETEX-OLE-PILA yhttp://www.webometrics.info/rank_by_country_es.asp?country=co. 23. EJEMPLO DE IMPACTOAnlisis Beneficio Costo y de Rentabilidad para laEconomaMillones de pesos de 2007 INDICADORVALORTotal graduados 117.591Impacto en el ingreso adicional laboral anual por beneficiario $8.03universitarioImpacto en el ingreso adicional laboral anual por beneficiario $4.62tcnico o tecnlogoVP Ganancia en ingreso laboral (+)$4.715.116VP Costo privado de sostenimiento (-) $66.306VP Costo sistema educativo (-)$3.376.938VP Costo administrativo ICETEX (-)$8.120Relacin beneficio costo 1.37Tasa interna de retorno14.63% 24. EJEMPLO DE IMPACTOAnlisis Beneficio Costo y de Rentabilidad para el Beneficiario promedioMillones de pesos de 2007 INDICADORVALOR Impacto en el ingreso adicional laboral anual por beneficiario$6.3 promedio VP Ingreso recursos del crdito y subsidio ACCES (+)$9.51 VP Ganancia en ingreso laboral marginal (+) $83.50 VP Costo privado de sostenimiento (-) $3.17 VP Costo matricula (-)$12.68 VP Pago marginal de impuesto y seguridad social (-) $16.60 VP Repago del