informe final_programa caravanas de la salud

79
Caravanas de la Salud Evaluación de Consistencia y Resultados 2011-2012

Upload: ezequiel-garcia

Post on 07-Nov-2015

16 views

Category:

Documents


5 download

DESCRIPTION

Caravanas de La Salud, Secretaría de Salud, evaluación

TRANSCRIPT

  • Caravanas de la Salud

    Evaluacin de Consistencia yResultados 2011-2012

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Resumen EjecutivoLa salud en Mxico ha registrado avances importantes en las ltimas dcadas. Los principalesindicadores de resultados -mortalidad infantil y mortalidad materna- se han reducido significativamente.No obstante estas ganancias en indicadores promedio, se reconoce que existe una importantedesigualdad en los resultados de salud entre distintas comunidades y que las ganancias de los ltimosaos no han sido de igual magnitud en todas ellas. Los resultados de salud de las pequeascomunidades rurales, alejadas y dispersas no registran los niveles de salud ni las ganancias recientesque las comunidades grandes y urbanas. Ms an, se reconoce que los resultados de salud se venafectados por la falta de acceso regular a servicios de salud.

    En este contexto, el gobierno federal desde los aos 70 ha emprendido distintos esfuerzos por tratar deacercar servicios de salud a comunidades marginadas, alejadas y dispersas; el Programa Caravanas deSalud, iniciado en 2007 es el ltimo de ellos y coexiste inclusive con programas previos y manejadospor los estados, como el Programa de Amplicacin de Cobertura. El Programa, busca a travs deUnidades Mdicas Mviles itinerantes, llevar servicios de salud a estas comunidades. Del xito delPrograma depende, por un lado, el acceso a servicios de salud de aproximadamente 3.9 millones dehabitantes de las comunidades objetivo del mismo y por el otro, su consolidacin como una polticapblica de largo plazo.

    El xito de un programa social depende de su diseo y operacin y de cmo estos dos elementos sevan ajustando en el tiempo en respuesta a la identificacin de reas de oportunidad en su diseooriginal o en su operacin o ante una nueva realidad. En este contexto, las evaluaciones de losprogramas son fundamentales. El Programa Caravanas de Salud ha estado sujeto a mltiplesevaluaciones externas desde su incepcin: ha tenido evaluaciones externas que describen la operacindel programa, ha tenido evaluaciones especficas que buscan analizar la lgica de su marco de diseoy evolucin de principales indicadores (Evaluaciones Especficas de Desempeo) y evaluaciones queintentan medir algunos resultados de salud. El programa desafortunadamente no ha tenido unaevaluacin de impacto.

    Este documento contiene los resultados de la Evaluacin de Consistencia y Resultados, que es laprimera en su tipo que se realiza al programa. En pocas palabras las Evaluaciones de Consistencia yResultados analizan, a travs de estudios de gabinete, qu tanto los programas federales cuentan conla informacin necesaria que justifica su diseo y que norma su operacin y qu tanto la nuevainformacin que se genera, ya sea administrativa y de evaluaciones internas y externas, es usada paramejorar al programa, y qu tanto se han logrado los objetivos del programa.La evaluacin est dividida en seis secciones: i) Diseo, ii) Planeacin y Orientacin a Resultados, iii)Cobertura y Focalizacin; iv) Operacin; v) Percepcin de la Poblacin Atendida; y vi) Medicin deResultados. Los principales resultados que se desprenden de la evaluacin por tema son:

    Diseo. El programa cuenta con un diagnstico el Programa de Accin Especfico (PAE) y las Reglasde Operacin (ROP) que se publican cada ao- que justifica la necesidad de atender a la poblacin quevive en localidades alejadas y dispersas sin acceso regular a servicios de salud y en las cuales porcuestin de escala no es conveniente establecer por el momento unidades de salud fijas. Los objetivosdel Programa y la definicin de la poblacin potencial responden a esta necesidad y estn alineadoscon el Plan Nacional de Desarrollo, el Programa Sectorial de Salud y los Objetivos de las Metas delMilenio. El programa tiene sinergias con otros programas federales (e.g. Seguro Popular) ynormativamente hablando se intenta evitar duplicidades con el IMSS Oportunidades. El programa debeestablecer en las ROP la cuantificacin de la poblacin objetivo que se busca atender en el ao encuestin.

    Planeacin y Orientacin a Resultados. El programa cuenta con un plan estratgico (PAE) ydocumentos de planeacin anuales (ROP) que clarifican su fin y propsitos y que guan su gestin.Adems el programa ha estado sujeto a mltiples evaluaciones externas, y se tiene evidencia que se

    2S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    busca incorporar las recomendaciones en los documentos oficiales y en la gestin. El programa generaasimismo informacin administrativa de gestin que le permite monitorear peridicamente el alcance delos objetivos establecidos. Se tiene evidencia que la planeacin se realiza de manera formal yconsensuada entre los distintos participantes en el programa. Dos evaluaciones pendientes son: encampo sobre la cobertura (poblacin y servicios) y de impacto.Cobertura y Focalizacin. En las ROP se define la estrategia de cobertura del programa con base en ladefinicin de la poblacin potencial y objetivo. No obstante, las metas de cobertura no estncuantificadas en las ROP. Este es uno de los pendientes del programa. Dado que la definicin de lapoblacin potencial se hace con base en los ndices de Marginacin o ndices de Desarrollo Humano delas localidades o municipios en los cuales viven los beneficiarios, se cuenta con la informacin para suidentificacin fcilmente (CONAPO o PNUD). Se necesita sin embargo: i) revisar la cuantificacin conbase en las nuevas actualizaciones que ya hizo CONAPO (y haga PNUD), y ii) se verifique en campoque no existe acceso regular por otros programas, en particular IMSS Oportunidades (as est definidoen las ROP). Las evaluaciones externas de 2008, 2009 y 2010 alertan sobre problemas de cobertura delocalidades y de cobertura donde ya existen otros servicios. Se calcula que la poblacin potencial es de3.9 millones de personas. La poblacin atendida se calcula en 3.7 millones, aunque puede estarsobreestimada pues se mide por personas atendidas en general y no por personas atendidas porprimera vez. El programa ya ha desarrollado la base para medir personas atendidas por primera vezcon lo cual se tendr una medicin correcta del nmero de personas atendidas.

    Operacin. El PCS es un programa federal, manejado por la Direccin General de Planeacin yDesarrollo en Salud de la Secretara de Salud que se opera a travs de los Servicios Estatales deSalud. Parte crucial de la operacin es la definicin de las rutas a atender, las cuales son propuestaspor las entidades federativas y autorizadas por la federacin. Existen manuales de operacin para esteproceso y otros procesos torales, como el que asegura que las Unidades Mdicas Mviles y los equipositinerantes estn en condiciones de prestar el servicio. Como el programa presta servicios de salud a lacomunidad y a la persona, sus beneficiarios son todas las personas que viven en las comunidadesobjetivo. No es necesario llevar a cabo un proceso de seleccin de beneficiarios. Si es importante sinembargo que se asegure que las personas de estas comunidades se integren al Padrn de Salud y quetengan Expedientes Clnicos Electrnicos, cuando estas iniciativas ya estn funcionando plenamente.En el PCS concurren fondos de distintas fuentes - federal del programa, SPSS, estatal- y distintas reasoperativas DGPLADES, SESA, CNPSS, REPSS, Secretara de Finanzas Estatales. Esta complejidadlleva a que en diversas ocasiones los recursos no lleguen en tiempo a la unidad administrativa final y aque no se tenga una contabilidad que registre plenamente los recursos usados por el programa (e.g. nose prorratean los costos del REPSS). Esta situacin solo cambiar con una reforma global al arreglofinanciero del sector pblico. No obstante lo anterior, se debe hacer un esfuerzo que proporcione,aunque sea, un estimado grueso del costo unitario del programa. El programa logra en la mayora delos aos las metas establecidas en la MIR.

    Percepcin de la poblacin atendida. La percepcin de la poblacin atendida se captura a travs de unmdulo de quejas que es revisado por los supervisores y adems se han hecho visitas de campo alocalidades de las siete entidades prioritarias del programa (Chiapas, Durango, Guerrero, Nayarit,Oaxaca, Puebla y Veracruz). En general la poblacin tiene una buena percepcin del programa, peroexisten lugares en los cuales los beneficiarios externan que no hay claridad en el calendario de lasUnidades Mdicas Mviles y acusan falta de medicamentos. El equipo evaluador no puede asegurarque los resultados son representativos de la poblacin objetivo pues stas se han enfocado a lasentidades prioritarias y no se cuenta con informacin respecto a la seleccin de la muestra.

    Medicin de resultados. El programa documenta sus resultados a nivel de Fin y Propsito conindicadores de la MIR, informes gerenciales y evaluaciones externas que no son de impacto. Con baseen la informacin disponible en estas herramientas se puede concluir que el programa ha tenidoresultados positivos a nivel de Fin y Propsito: casi todos los aos se logra la meta establecida y hoy elprograma tiene una cobertura de 98.39% personas (Fin) y 119.61% comunidades (Propsito). Noobstante, el equipo evaluador considera que el indicador de Fin no captura el Fin del programa y

    3S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    sugiere cambiarlo por uno que capture resultados de salud. El programa no ha tenido evaluaciones deimpacto. Desafortunadamente la cobertura universal del programa complican una evaluacin deimpacto, el equipo evaluador sugiere que evale la posibilidad de realizar una.

    4S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IntroduccinLa salud en Mxico ha registrado avances importantes en las ltimas dcadas. Los principalesindicadores de resultados -mortalidad infantil y mortalidad materna- se han reducido significativamente.No obstante estas ganancias en indicadores promedio, se reconoce que existe una importantedesigualdad en los resultados de salud entre distintas comunidades y que las ganancias de los ltimosaos no han sido de igual magnitud en todas ellas. Los resultados de salud de las pequeascomunidades rurales, alejadas y dispersas no registran los niveles de salud ni las gananciasobservadas que las comunidades grandes y urbanas. Ms an, se reconoce que los resultados desalud se ven afectados por la falta de acceso regular a servicios de salud.

    En este contexto el gobierno federal desde los aos 70 ha emprendido distintos esfuerzos por tratar deacercar servicios de salud a comunidades marginadas, alejadas y dispersas; el Programa Caravanas deSalud, iniciado en 2007 es el ltimo de ellos. El Programa, busca a travs de Unidades Mdicas Mvilesitinerantes, llevar servicios de salud a estas comunidades. Del xito del Programa depende, por un lado,el acceso a servicios de salud de aproximadamente 3.9 millones de habitantes de las comunidadesobjetivo del mismo y por el otro, su consolidacin como una poltica pblica de largo plazo.El xito de un programa social depende de su diseo y operacin y de cmo estos dos elementos sevan ajustando en el tiempo en respuesta a la identificacin de reas de oportunidad en su diseooriginal o en su operacin o ante una nueva realidad. En este contexto, las evaluaciones de losprogramas son fundamentales. El Programa Caravanas de Salud ha estado sujeto a mltiplesevaluaciones externas desde su incepcin: ha tenido evaluaciones externas que describen la operacindel programa, ha tenido evaluaciones especficas que buscan analizar la lgica de su marco de diseoy evolucin de principales indicadores (Evaluaciones Especficas de Desempeo) y evaluaciones queintentan medir algunos resultados de salud. El programa desafortunadamente no ha tenido unaevaluacin de impacto.

    Este documento contiene los resultados de la Evaluacin de Consistencia y Resultados, que es laprimera en su tipo que se realiza al programa. En pocas palabras las Evaluaciones de Consistencia yResultados analizan, a travs de estudios de gabinete, qu tanto los programas federales cuentan conla informacin necesaria que justifica su diseo y que norma su operacin y qu tanto la nuevainformacin que se genera, ya sea administrativa y de evaluaciones internas y externas, es usada paramejorar al programa, y qu tanto se han logrado los objetivos del programa. Los resultados indican queel programa en general i) ha buscado siempre evaluarse, ii) se ha esforzado en generar informacininterna til para su gestin; iii) ha ajustado su operacin para mejorar, y iv) registra, aunque pocos,algunos temas pendientes cruciales, como es el de contar con una medicin clara de la poblacinobjetivo y mejorar su cobertura y focalizacin. No obstante estos resultados positivos, el equipoevaluador considera que antes de llegar a una conclusin final del programa es necesario i) realizar unaevaluacin detallada en campo de la cobertura del mismo (cobertura de localidades, poblacin atendiday los servicios ofrecidos), considerando que existe el programa IMSS Oportunidades y unidades fijas delos Servicios Estatales de Salud, y ii) monitorear consistentemente los resultados de salud en el tiempode la poblacin beneficiaria (ante la dificultad de hacer una evaluacin de impacto).

    5S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.1 DISEOIV.1.1 CARACTERSTICAS DEL PROGRAMA

    Con base en informacin solicitada a los responsables del programa, se debe adjuntar en elAnexo 1 "Descripcin General del Programa", una breve descripcin de la informacin reportadaen un mximo de dos cuartillas. Dicha descripcin debe considerar los siguientes aspectos:

    1. Identificacin del programa (nombre, siglas, dependencia y/o entidad coordinadora, ao deinicio de operacin);

    2. Problema o necesidad que pretende ;3. Objetivos nacionales y sectoriales a los que se vincula;4. Descripcin de los objetivos del programa, as como de los bienes y/o servicios que ofrece;5. Identificacin y cuantificacin de la poblacin potencial, objetivo y atendida;6. Cobertura y mecanismos de focalizacin;7. Presupuesto aprobado en el ejercicio fiscal sujeto a evaluacin;8. Principales metas de Fin, Propsito y Componentes, y9. Valoracin del diseo del programa respecto a la atencin del problema o necesidad.

    6S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.1.2 ANLISIS DE LA JUSTIFICACIN DE LA CREACIN Y DEL DISEO DEL PROGRAMAEl problema o necesidad prioritaria que busca resolver el programa est identificado en undocumento que cuenta con la siguiente informacin:

    1

    a) El problema o necesidad se formula como un hecho negativo o como una situacin quepuede ser revertida.

    b) Se define la poblacin que tiene el problema o necesidad.c) Se define el plazo para su revisin y su actualizacin.

    Respuesta Si

    Nivel

    4

    El programa tiene identificado el problema o necesidad que busca resolver, y El problema cuenta con todas las caractersticas establecidas en la pregunta.

    Justificacin:Las Reglas de Operacin (ROP) definen que existen comunidades dispersas y alejadas cuyoshabitantes no tienen acceso regular a servicios de salud y que dicha falta de acceso puede ser revertidaa travs de llevar servicios de salud en prevencin, promocin y primer nivel a travs de equipositinerantes, unidades mdicas mviles (UMM) y organizar la atencin en unidades que atiendenpadecimientos de mayor complejidad. Adems, las ROP definen a la poblacin que tiene el problema onecesidad, y aunque lo hacen de manera indirecta, a travs de definir comunidades con el menor ndicede Desarrollo Humano (IDH) o localidades con altos o muy altos niveles de marginacin, el equipoevaluador considera que esto es vlido pues el estado de la salud es uno de los componentesprincipales de ambos ndices y el estado de salud tiene como uno de sus determinantes el acceso aservicios mdicos. Dado que la necesidad prioritaria que busca resolver el programa es proveer deacceso de servicios de salud a la poblacin, el logro del objetivo tiene como condicin bsica que secubra la poblacin identificada bajo estas condiciones, la poblacin potencial. En las ROP se definen losplazos para el logro de la cobertura.

    El diagnstico del problema no hace referencia generalizada a las cuestiones de gnero; siempre sehabla de grupos marginados o vulnerables. No obstante lo anterior, los documentos oficiales senfatizan que en las comunidades marginadas las mujeres presentan riesgos especficos, por sufuncin bilgica de la reproduccin, y en particular, la mortalidad materna es una preocupacinprioritaria y su reduccin uno de los principales objetivos.

    7S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Existe un diagnstico del problema que atiende el programa que describa de manera especfica:2

    a) Causas, efectos y caractersticas del problema.b) Cuantificacin, caractersticas y ubicacin territorial de la poblacin que presenta el

    problema.c) El plazo para su revisin y su actualizacin.

    Respuesta Si

    Nivel

    4

    El programa cuenta con un diagnstico del problema, y El diagnstico cuenta con todas las caractersticas establecidas en la pregunta.

    Justificacin:El documento Programa de Accin Especfico (PAE) Caravanas de la Salud 2007-2012, actualizado enel 2011, establece las causas, efectos y caractersticas del problema; establece una cuantificacin de lapoblacin potencial, sus caractersticas, y su ubicacin territorial, con datos que permiten establecer surelacin con el Programa Sectorial de Salud (PROSESA) 2007-2012 y las metas del milenio (mortalidadinfantil y mortalidad materna); y establece un plazo de ejecucin para cada meta establecida. Deacuerdo al PAE 2011, y al rbol del Problema (ED 2007, Anexo II), se establece que el problema quese quiere resolver es la falta de acceso o de acceso regular de la poblacin a servicios de salud. Lapoblacin potencial se ubica en alrededor de 3,900,000 habitantes de 20,000 comunidades del pas,misma que ser atendida de acuerdo a 4 criterios de focalizacin (ver preguntas 7 y 24). Esta falta deacceso se explica porque las comunidades prioridad del programa no cuentan con unidades de saludestablecidas pues dado su tamao y dispersin no es viable instalarlas o, la infraestructura fsica yhumana es inadecuada; se tienen insuficientes mecanismos para la atencin de poblacinculturalmente diversa y se ha observado una desarticulacin de los esfuerzos de los distintos rdenesde gobierno. Los efectos del problema se pueden agrupar en tres: falta de prcticas de prevencin yatencin a la salud institucionales, los habitantes reciben una atencin inoportuna con consecuenciaspara su salud (morbilidad) y longevidad (mortalidad) y estn expuestos a un gasto excesivo en salud,que los pone en riesgo de sufrir gastos empobrecedores.

    El diagnstico en el PAE se actualiz en el 2011, y utiliza informacin especfica que analiza losmunicipios del Conteo 2005. Aunque no se especifica en ningn documento cundo debiera realizarseun nuevo diagnstico, el cambio de administracin en 2012 y la redaccin de un nuevo Plan Nacionalde Desarrollo (PND) y PROSESA es el momento adecuado para llevar a cabo la revisin. En futurosdiagnsticos sera recomendable usar datos del Censo 2010, as como los nuevos clculos de ndicesde marginacin por localidad y los ndices de desarrollo humano por municipio que calculanrespectivamente el Consejo Nacional de Poblacin (CONAPO) y Programa de las Naciones Unidaspara el Desarrollo (PNUD) con base en los datos del Censo 2010, y en particular datos administrativosdel programa. En este ejercicio ser fundamental actualizar la poblacin potencial y proporcionar datosde indicadores de resultados de salud; por ejemplo mortalidad infantil, mortalidad materna, y variablesque midan la desnutricin, peso para la edad, desmedro, peso para la tall y peso al nacer; as comohacer una lista pblica que incluya cada una de las localidades potenciales del Programa. Finalmentese sugiere incorporar el rbol del Problema como un anexo al diagnstico.

    8S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Existe justificacin terica o emprica documentada que sustente el tipo de intervencin que elprograma lleva a cabo?

    3

    Respuesta Si

    Nivel

    3

    El programa cuenta con una justificacin terica o emprica documentada quesustente el tipo de intervencin que el programa lleva a cabo en la poblacin objetivo, y La justificacin terica o emprica documentada es consistente con el diagnstico delproblema, y Existe(n) evidencia(s) (nacional o internacional) de los efectos positivos atribuibles alos beneficios o los apoyos otorgados a la poblacin objetivo.

    Justificacin:El Programa de Accin Especfico 2007-2012 establece que el Programa Caravanas de la Salud (PCS)es una continuacin de los esfuerzos que durante 25 aos y a travs de 5 programas (Programa deExtensin de Cobertura (PEC); Programa de Salud Rural (PSR); Programa de Apoyo a los Servicios deSalud de la Poblacin Abierta (PASSPA); Programa de Ampliacin de Cobertura (PAC) y Programa deDesarrollo Humano Oportunidades (PDHO)-Salud), el Estado ha hecho para extender la cobertura acomunidades alejadas. Indica adems que existe evidencia emprica que como resultado de estosesfuerzos desde 2000 y hasta el 2006 se ha aumentado la cobertura efectiva de varias intervencionesde los Paquetes de Salud, entre los que destacan aqullas prioritarias para el programa: atencin departo y recin nacido y cuidado de neonatos y de infecciones respiratorias agudas en nios menores aun ao. Seala adems que las mejoras han sido en los estados objeto de la cobertura prioritaria delprograma (PAE 2011 pg. 29). El PAE no refiere los estudios que cuantifican estos resultados, pero lasevaluaciones de los resultados de salud para el PDHO dan cuenta de las mejoras en los resultados desalud en los nios al recibir atencin mdica peridica. En el plano de la atencin a travs de UnidadesMdicas Mviles (UMM), Mortier (2005) revisa la literatura en el tema, mientras que el InternationalCommittee of the Red Cross (2006) (http://www.icrc.org/eng/assets/files/other/icrc_002_0886.pdf)resume los hallazgos de la revisin. Aspectos pertinentes para el PCS son: i) los programas de UMMson efectivos pero no tienen resultados significativos en el largo plazo; ii) resulta importante establecerlos mecanismos de referencia a unidades de salud fijas; iii) es fundamental tener planes de trabajodetallados para que el trabajo en campo se lleve de forma regular; iv) las UMM han demostrado sermuy tiles en campaas de deteccin (screening test) de patologas especficas como el cncer demama; y en general para acciones de promocin y prevencin, as como en intervenciones especficascomo cataratas; v) algunos estudios citados en la revisin de la Cruz Roja argumentan que losprogramas pueden ser muy costosos, aunque pocos estudios analizan el impacto de las UMM.

    9S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.1.3 ANLISIS DE LA CONTRIBUCIN DEL PROGRAMA A LOS OBJETIVOS NACIONALES YEl Propsito del programa est vinculado con los objetivos del programa sectorial, especial oinstitucional considerando que:

    4

    a) Existen conceptos comunes entre el Propsito y los objetivos del programa sectorial,especial o institucional, por ejemplo: poblacin objetivo.

    b) El logro del Propsito aporta al cumplimiento de alguna(s) de la(s) meta(s) de alguno(s) delos objetivos del programa sectorial, especial o institucional.

    Respuesta Si

    Nivel

    3

    El programa cuenta con un documento en el que se establece la relacin del Propsitocon los objetivo(s) del programa sectorial, especial o institucional, y Es posible determinar vinculacin con todos los aspectos establecidos en la pregunta.

    Justificacin:Las Reglas de Operacin 2012 (ROP) en su inciso 2.2 as como la Matriz de Indicadores de Resultados(MIR) 2011 establecen la vinculacin del Programa Caravanas de Salud (PCS) con el Objetivo 2 delPROSESA, el cual propone reducir las brechas o desigualdades en salud mediante intervencionesfocalizadas en grupos vulnerables y comunidades marginadas. Los elementos comunes entre elPropsito del PCS y los objetivos del PROSESA se dan en dos vertientes. Primero, comparten la mismapoblacin objetivo: el PCS incluye los 125 municipios de menor IDH, mientras que el PROSESA seenfoca en los 100 municipios de menor IDH. Segundo, el PCS busca proporcionar servicios de saludque inciden en los resultados de salud que busca mejorar el PROSESA. En particular el PCS al mejorarel acceso a servicios de salud de prevencin, promocin y de atencin de las intervenciones definidasen el Catlogo Universal de Servicios de Salud (CAUSES) (que incluye atencin del embarazo y delrecin nacido y nio) debe coadyuvar a: i) disminuir la mortalidad materna (a la mitad en los 100municipios) y ii) disminuir la mortalidad infantil (en 40% en los 100 municipios), que son las dos metasque se han definido en el PROSESA

    No obstante, dado que los resultados de salud, incluidos la mortalidad materna y la mortalidad infantil,tienen mltiples determinantes, algunos que no son nicamente de cuidado mdico, el logro de losobjetivos del PCS no es suficiente para el cumplimiento de las metas sealadas en el PROSESA. Existeslida evidencia emprica que las condiciones socioeconmicas, principalmente educacin de la madree infraestructura (Barraza Llorns et al, 2010; Aguilera et al, 2006; Martnez, 2008; y Zurita et al, 2003),e inclusive caractersticas de personalidad -lase aversin al riesgo, retardo en la toma de decisiones,valoracin del presente vs. el futuro, estado de nimo, entre otras- (ver recientes estudios en laliteratura de economa del comportamiento) inciden en las decisiones que toman las personas respectoal cuidado de su salud. El PCS necesita en este sentido ser articulado con otros programas, desdeaqullos que proporcionan infraestructura pblica bsica, hasta aqullos que mejoran la toma dedecisiones de las personas, como los de informacin.

    10S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Con cules objetivos, ejes y temas del Plan Nacional de Desarrollo vigente est vinculado elobjetivo sectorial relacionado con el programa?

    5

    Objetivo TemaEjeIgualdad deoportunidades

    5. Reducir la pobreza extrema y asegurar la igualdad deoportunidades y la ampliacin de capacidades para quetodos los mexicanos mejoren significativamente sucalidad de vida y tengan garantizados alimentacin,salud, educacin, vivienda digna y un

    1 Superacin de lapobreza

    Igualdad deoportunidades

    5. Reducir la pobreza extrema y asegurar la igualdad deoportunidades y la ampliacin de capacidades para quetodos los mexicanos mejoren significativamente sucalidad de vida y tengan garantizados alimentacin,salud, educacin, vivienda digna y un

    2 Salud

    ObjetivoPrograma SectorialPrograma Sectorial deSalud

    1. Mejorar las condiciones de salud de la poblacin.

    Programa Sectorial deSalud

    2. Reducir las brechas o desigualdades en salud mediante intervencionesfocalizadas en grupos vulnerables y comunidades marginadas.

    Programa Sectorial deSalud

    4. Evitar el empobrecimiento de la poblacin por motivos de salud.

    Justificacin:El Programa Caravanas de Salud (PCS) al proporcionar acceso a servicios de salud a poblacin que nocuenta regularmente con servicios de salud debe mejorar la salud de la poblacin objetivo, cerrar lasbrechas de indicadores en salud con otros grupos poblacionales y al ser la salud un componentefundamental del capital humano de las personas debe permitirles un desarrollo ms favorable con loque se contribuye a igualar las oportunidades.

    11S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Cmo est vinculado el Propsito del programa con las Metas del Milenio?6

    b) Indirecta: El logro del Propsito aporta al cumplimiento de alguna(s) de la(s)Meta(s) del Milenio.

    Justificacin:El propsito del programa es que la poblacin de localidades geogrficamente dispersas y de difcilacceso cuente con servicios regulares de promocin, prevencin y atencin mdica mediante equipositinerantes y unidades mdicas mviles (MIR 2011).Se considera que tiene una vinculacin con dos de los objetivos del a Metas del Milenio:a)Reducir la mortalidad infantil (Reducir en dos terceras partes la mortalidad de los nios menores decinco aos entre 1990 y 2015)b)Mejorar la salud materna (Reducir la mortalidad materna en tres cuartas partes entre 1990 y 2015)La vinculacin en ambos casos se da a travs de dos vertientes. Primero, el Programa Caravanas de laSalud (PCS) focaliza la intervencin en las localidades con un alto ndice de marginacin. No obstante,el ndice de marginacin no incluye explcitamente estos dos resultados de salud, se ha documentado,que es precisamente en este tipo de localidades donde hay mayor prevalencia de mortalidad infantil ymaterna (Mxico en cifras, CONAPO). Segundo, el PCS otorga intervenciones, las incluidas en elCatlogo Universal de los Servicios de Salud (CAUSES), que abordan precisamente el cuidado denios menores de un ao y del embarazo, parto y puerperio. Adems, el programa contempla lareferencia de pacientes a unidades de segundo nivel, lo que contribuira a disminuir la tasa demortalidad por la falta de acceso a hospitales.

    No obstante, la vinculacin es indirecta, el logro del propsito aporta al cumplimiento de estas Metas delMilenio, pues se proporciona acceso a servicios de salud regulares, pero persisten otros factores, comocondiciones socioeconmicas y de personalidad que afectan estos resultados de salud que no sonabordados por el programa por estar fuera de su mbito de competencia (ver tambin la pregunta 4 ylas referencias all citadas).

    12S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.1.4 ANLISIS DE LA POBLACIN POTENCIAL Y OBJETIVOLas poblaciones, potencial y objetivo, estn definidas en documentos oficiales y/o en eldiagnstico del problema y cuentan con la siguiente informacin y caractersticas:

    7

    a) Unidad de medida.b) Estn cuantificadas.c) Metodologa para su cuantificacin y fuentes de informacin.d) Se define un plazo para su revisin y actualizacin.

    Respuesta Si

    Nivel

    2

    El programa tiene definidas las poblaciones (potencial y objetivo), y Las definiciones cuentan con dos de las caractersticas establecidas.

    Justificacin:Las Reglas de Operacin (ROP) 2011 en su inciso 5.5 definen a la poblacin potencial como latotalidad de familias y personas que habitan en aproximadamente 20 mil localidades del pas que notienen acceso o que tienen un acceso irregular a los servicios institucionales de salud. Asimismo, secuantifica que es del orden de 3.9 millones de habitantes que estarn ubicados en aproximadamente20,000 localidades distribuidas en las 31 entidades federativas y el DF, misma que deber tenercobertura completa en el 2012.Hasta antes de 2012 las ROP no definan la poblacin objetivo. En las ROP 2012 la definicin de lapoblacin objetivo ha sido parcialmente clarificada. El inciso 5.5 textualmente dice El programa definecomo poblacin objetivo a la totalidad de las personas que habitan en las localidades cubiertas por elprograma. A criterio del equipo evaluador esta clarificacin es parcial pues i) no se especifica unnmero y ii) textualmente hablando la poblacin objetivo se define ex post a la operacin del programaal definirla como las localidades cubiertas por el programa, y no ex ante, un nmero, meta, que debeser alcanzada al llevarse a cabo el programa. Las ROP no cuantifican la poblacin objetivo.Las ROP no reflejan el hecho que como parte de ejercicios de planeacin, los administradores realizanao con ao una cuantificacin de la poblacin objetivo. El Sistema de Validacin de Rutas es elsistema que se usa para calcular la poblacin objetivo. Actualmente se cuantifica en 3,779,118personas. Este sistema al ser un sistema administrativo se revisa y actualiza constantemente.A futuro sera muy til que i) dado que el clculo de la poblacin potencial se realiz con base eninformacin del Conteo 2005, se actualizaran los datos con la informacin del Censo 2010 (de acuerdoa los administradores del programa el clculo de la poblacin objetivo ya se realiz con base en elCenso 2010); y ii) se definiera en las ROP una poblacin objetivo ex ante, es decir, escribir el nmerode personas que se piensa cubrir el ao especfico en cuestin.

    13S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Existe informacin que permita conocer quines reciben los apoyos del programa (padrn debeneficiarios) que:

    8

    a) Incluya las caractersticas de los beneficiarios establecidas en su documento normativo.b) Incluya el tipo de apoyo otorgado.c) Est sistematizada e incluya una clave nica de identificacin por beneficiario que no

    cambie en el tiempo.d) Cuente con mecanismos documentados para su depuracin y actualizacin.

    Respuesta No

    Justificacin:El Programa Caravanas de la Salud (PCS) organiza a prestadores de servicios de salud en dos niveles,servicios a la comunidad y servicios a la persona. Sus beneficiarios son las personas de las localidadesque visitan las Unidades Mdicas Mviles (UMM), ya sea que stas se encuentren sanas y slo recibanacciones de prevencin y promocin o enfermas que se atiendan en las UMM.

    Para los servicios a la comunidad, teniendo stos una naturaleza de bien pblico, no tiene sentido tenerun padrn de beneficiarios. Respecto a las personas atendidas, las Reglas de Operacin (ROP) 2012definen como un derecho el que todos los beneficiarios cuenten con un expediente clnico (ver inciso5.9.1). Esto es sumamente importante adems en el marco de la Integracin Funcional del SistemaNacional de Salud. De acuerdo a esta estrategia, debe existir un Padrn nico de Salud ysimultneamente se debe implementar un Expediente Clnico Electrnico que pueda cruzar informacincon el Padrn (Secretara de Salud 2010). De esta forma, es muy importante que conforme estas dosestrategias se vayan implementando, los beneficiarios del PCS sean incluidos. Se recomienda que sedesarrolle un plan para asegurar que esto va a suceder y por el otro lado, se asegure que la informacinque genera el programa pueda medir la cobertura, la poblacin atendida, y no solamente lasintervenciones (que se pueden aplicar a una misma persona), y que impide medir la coberturacerteramente.

    De acuerdo con el numeral 5.7 de las ROP 2012 los beneficiarios debern cumplir con los siguientesrequisitos:i)Ser residentes de localidades que no cuentan actualmente con acceso a servicios de salud regulares(en las localidades sede, subsede y satlite programadas en las rutas de las UMM)ii)No contar con beneficios de la seguridad socialiii)Estar incorporadas al Sistema de Proteccin Social en Salud (SPSS) y/o Programa de DesarrolloHumano Oportunidades (PDHO) Salud y/o a otros programas de desarrollo social impulsados por elGobierno Federal que sean implementados en las localidades objetivo del Programa (requisito delSPSS no necesario en la primera etapa de recepcin de servicios de salud).

    14S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Si el programa recolecta informacin socioeconmica de sus beneficiarios, explique elprocedimiento para llevarlo a cabo, las variables que mide y la temporalidad de las mediciones.

    9

    Justificacin:De acuerdo con el numeral 5.7 de las Reglas de Operacin (ROP) 2012 los beneficiarios deberncumplir con los siguientes requisitos:

    i)Ser residentes de localidades que no cuentan actualmente con acceso a servicios de salud regulares(en las localidades sede, subsede y satlite programadas en las rutas de las Unidades Mdicas Mviles(UMM))ii)No contar con beneficios de la seguridad socialiii)Estar incorporadas al Sistema de Proteccin Social en Salud (SPSS) y/o Programa de DesarrolloHumano Oportunidades (PDHO) Salud y/o a otros programas de desarrollo social impulsados por elGobierno Federal que sean implementados en las localidades objetivo del Programa (requisito delSPSS no necesario en la primera etapa de recepcin de servicios de salud).De acuerdo a esta definicin de las caractersticas de los beneficiarios no es necesario recolectarinformacin personalizada del nivel socioeconmico.

    15S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.1.5 ANLISIS DE LA MATRIZ DE INDICADORES PARA RESULTADOSEn el documento normativo del programa es posible identificar el resumen narrativo de la Matrizde Indicadores para Resultados (Fin, Propsito, Componentes y Actividades)?

    10

    Respuesta Si

    Nivel

    3

    Algunas de las Actividades, todos los Componentes y el Propsito de la MIR seidentifican en las ROP o documento normativo del programa.

    Justificacin:En las Reglas de Operacin (ROP) 2012 en el inciso 4.3 se especifica que la definicin de objetivos serealiz con base en el resumen narrativo de la Matriz de Indicadores para Resultados (MIR): seequipararon los conceptos utilizados en la orientacin estratgica del programa en relacin al Fin,Propsito y Componentes, y se estableci una relacin de equivalencia con las Actividades:El Fin de la MIR se relaciona directamente con la Finalidad del ProgramaEl Propsito de la MIR con el objetivo general del ProgramaLos Componentes (bienes y servicios) de la MIR se relacionan con los objetivos especficos delProgramaLas Actividades de la MIR se relacionan con las estrategias y lneas de accin del Programa.

    Ahora bien, an si se equipararon los conceptos hay que hacer dos observaciones:La finalidad de las ROP (que se equipara al fin) no est definida en las ROP.Las estrategias y lneas de accin de las ROP, que se equiparan a las actividades se mencionan en lasROP en diversos apartados y no en uno especfico.

    Esta situacin lleva al equipo evaluador a considerar que el nivel de cumplimiento es tres. Es decir, seconcede que s existen las actividades y no se define el fin.

    El equipo evaluador considera que las ROP ms que equiparar conceptos deberan fijar sus objetivosdirectamente con base en la MIR.

    16S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Las Fichas Tcnicas de los indicadores del programa cuentan con la siguiente informacin:11

    a) Nombre.b) Definicin.c) Mtodo de clculo.d) Unidad de Medida.e) Frecuencia de Medicin.f) Lnea base.

    g) Metas.h) Comportamiento del indicador (ascendente, descendente, regular nominal).

    Respuesta No

    Justificacin:Las fichas tcnicas de los indicadores no reportan el comportamiento del indicador (ver Anexo 5 de esteInforme para el anlisis de cada indicador).Ms all de las fichas tcnicas, se perciben dos reas de mejora en la definicin de los indicadores: i)modificar indicadores e ii) incluir nuevos indicadores. En el primer caso el indicador para medir el fin delprograma no es el adecuado pues no mide el estado de salud de la poblacin atendida, que es lo querealmente se busca impactar con el Programa Caravanas de la Salud (PCS), ver Matriz de Indicadorespara Resultados (MIR) 2011. Se recomienda definir un nuevo indicador que capture las condiciones desalud de la poblacin. Respecto a los indicadores de productos y servicios, es deseable que losdenominadores tengan una relacin con la poblacin atendida. El indicador porcentaje de unidadesmdicas mviles en operacin y totalmente equipadas que cuentan con equipo itinerante completo ycapacitado medido en relacin a las unidades adquiridas no es adecuado para medir las accionesnecesarias que se tienen que llevar a cabo para cumplir con los productos y servicios. Un indicador msadecuado sera, en opinin del equipo evaluador, porcentaje de unidades mdicas mviles enoperacin y totalmente equipadas que cuentan con equipo itinerante completo y capacitado en relacinal nmero de unidades mdicas mviles totalmente equipadas con equipo itinerante completo requeridopara cumplir los servicios programados. Respecto al segundo inciso, se considera que esindispensable incorporar indicadores que monitoreen la continuidad de la atencin de los pacientes porun lado, y la participacin comunitaria, por el otro.

    17S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Las metas de los indicadores de la MIR del programa tienen las siguientes caractersticas:12

    a) Cuentan con unidad de medida.b) Estn orientadas a impulsar el desempeo, es decir, no son laxas.c) Son factibles de alcanzar considerando los plazos y los recursos humanos y financieros

    con los que cuenta el programa.Respuesta Si

    Nivel

    3

    Del 70% al 84% de las metas de los indicadores del programa tienen lascaractersticas establecidas.

    Justificacin:El programa cuenta con seis metas de los indicadores de la Matriz de Indicadores para Resultados(MIR) 2011. Las seis metas establecidas cuentan con unidad de medida y de acuerdo a losadministradores del programa son factibles de alcanzar pues son el resultado de un ejercicio deplaneacin interno que considera i) el presupuesto destinado al programa; y ii) el hecho de que laoperacin es responsabilidad de las entidades federativas. Generalmente, ambos elementos hacenpoco factible establecer metas ms agresivas. En virtud de esta informacin slo faltara hacer unaevaluacin sobre su orientacin a impulsar el desempeo para definir el nivel de cumplimiento.

    En tres de ellas se busca alcanzar una meta del 100%, por lo que claramente estn orientadas aimpulsar el desempeo: localidades atendidas (Propsito), servicios de promocin y prevencinambulatorios (Componente) y servicios de atencin mdica ambulatoria (Componente). Sin embargo,tres indicadores tienen metas de menos del 100%:i)Poblacin atendida, Fin: Meta 81.18%. Al ritmo que se avanza en la poblacin atendida no serposible lograr la cobertura universal en 2012, pero esto no quiere decir que no est orientada a impulsarel desempeo, pues depende del financiamiento.ii)Porcentaje de UMM en operacin, Actividad: Meta 89.98%. Se establece como una meta mnima,pero no concuerda con la meta de Propsito.iii)Capacitacin, Actividad: Meta 90.05%. Informacin de aos anteriores sugieren que deberacumplirse el 100% de la meta.

    De esta forma, el equipo evaluador considera que cuatro de seis metas tienen las caractersticassealadas.

    El equipo evaluador considera que el Programa Caravanas de la Salud (PCS) debe documentar cadaao las razones por las cuales se definen las metas acordadas, en particular para justificar eldenominador y para justificar las restricciones financieras, y de recursos humanos a los que seenfrentan de no establecer metas del 100%.

    Ver el Anexo 6 de este Informe para ms detalle.

    18S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.1.6 ANLISIS DE POSIBLES COMPLEMENTARIEDADES Y COINCIDENCIAS CON OTROSCon cules programas federales y en qu aspectos el programa evaluado podra tenercomplementariedad y/o coincidencias?

    13

    Justificacin:La informacin que se encuentra en el Anexo 7 de los Informes Gerenciales del Programa Caravanasde la Salud (PCS) permite identificar que el PCS puede tener coincidencias con el programa IMSSOportunidades pues tienen los mismos objetivos, misma poblacin objetivo y mismos componentes(productos y servicios). Por el otro lado, el PCS es complementario con el Sistema de Proteccin Socialen Salud (SPSS) y el Programa de Desarrollo Humano Oportunidades (PDHO) Salud, pues lasUnidades Mdicas Mviles (UMM) y los equipos itinerantes proporcionan los servicios de promocin,prevencin y atencin establecidos en el Catlogo Universal de Servicios de Salud (CAUSES) y lasacciones asociadas al PDHO Salud. Adems, a travs del PCS se facilita y fomenta la afiliacin depersonas al SPSS. Esta situacin es reconocida en las Reglas de Operacin (ROP) 2012 del PCS;dentro de los objetivos especficos del PCS, en su inciso 4.2 se establece:Proporcionar atencin mdica y odontolgica con base en el CAUSES que ofrece el SPSS y lasacciones asociadas al PDHO Salud.

    Fomentar la afiliacin de las familias objetivo del Programa al SPSS y a los nios al Seguro Mdicopara una Nueva Generacin para coadyuvar a alcanzar la cobertura universal.

    Asimismo el inciso 5.5 de las ROP 2012 que describe la poblacin objetivo en uno de sus prrafosestablece:

    Para evitar duplicidad en la atencin y en la asignacin de recursos, los Servicios Estatales de Salud(SESA) no podrn proponer rutas que contengan localidades que sean responsabilidad del IMSSOportunidades.

    Tambin es complementario de todos los programas de AFASPE (Acuerdo para el Fortalecimiento delas Acciones de Salud).

    19S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.2 PLANEACIN Y ORIENTACIN A RESULTADOSIV.2.1 INSTRUMENTOS DE PLANEACIN

    La Unidad Responsable del programa cuenta con un plan estratgico con las siguientescaractersticas:

    14

    a) Es resultado de ejercicios de planeacin institucionalizados, es decir, sigue unprocedimiento establecido en un documento.

    b) Contempla el mediano y/o largo plazo.c) Establece los resultados que quieren alcanzar, es decir, el Fin y el Propsito del programa.d) Cuenta con indicadores para medir los avances en el logro de sus resultados.

    Respuesta Si

    Nivel

    4

    El plan estratgico tiene todas las caractersticas establecidas.

    Justificacin:El programa tiene dos documentos que lo guan: el Programa de Accin Especfico (PAE) 2007-2012que se public por primera vez al inicio del programa y que se actualiz en el 2011 y las Reglas deOperacin (ROP) que se emiten cada ao. Ambos documentos establecen el Fin y el Propsito delprograma, sus objetivos a mediano plazo (para el ao en cuestin en caso de las ROP y 2007-2012 enel caso del PAE 2011), y s definen indicadores para medir los avances en el logro de los resultados. Enparticular el PAE 2007-2012 en su inciso 3.4 define 13 estrategias y describe lneas de accinagrupadas en cada estrategia que habrn de orientar el proceso de planeacin, programacin,presupuestacin, organizacin, capacitacin, comunicacin, instrumentacin, operacin, seguimiento,informacin, control y evaluacin. Asimismo con acceso a documentos oficiales se pudo corroborar quese llevan a cabo ejercicios de planeacin peridicos e institucionalizados que sustentaron laactualizacin del PAE y que permiten ajustar anualmente las ROP.

    20S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    El programa cuenta con planes de trabajo anuales para alcanzar sus objetivos que:15a) Son resultado de ejercicios de planeacin institucionalizados, es decir, siguen un

    procedimiento establecido en un documento.b) Son conocidos por los responsables de los principales procesos del programa.c) Tienen establecidas sus metas.d) Se revisan y actualizan.

    Respuesta Si

    Nivel

    4

    Los planes de trabajo anuales tienen todas de las caractersticas establecidas.

    Justificacin:El programa para su operacin anual se gua por el Programa de Accin Especfico (PAE) 2007-2012,las Reglas de Operacin (ROP) y por el Programa Operativo Anual (POA). Las ROP y el POA serevisan y actualizan cada ao. Se realiza un POA para cada entidad federativa donde se establece adetalle los estndares de la asignacin de recursos y el costo anual de recursos por tipo de unidad. Sedefine la asignacin y los costos por tipo de unidad para recursos humanos, materiales y suministros yservicios generales. Adems se establece una propuesta de costos de operacin anual para losdiferentes tipos de unidades mviles del programa y el presupuesto o costos de operacin globales porla totalidad de las unidades mdicas mviles existentes.

    Las ROP y la Matriz de Indicadores para Resultados (MIR) establecen las metas anuales del Programa.Estos dos se revisan y se actualizan cada ao. Con la informacin de costos y asignacin de losrecursos definidos en el POA se puede establecer y planear el alcance de las metas. La planeacin decostos y asignacin de recursos permite que el programa establezca un nmero de Unidades MdicasMviles (UMM) totalmente equipadas y en operacin que puedan atender al mayor nmero delocalidades y as alcanzar el nmero de servicios de promocin, prevencin y atencin mdicaprogramados.

    Asimismo con acceso a documentos oficiales se pudo corroborar que se llevan a cabo ejercicios deplaneacin peridicos e institucionalizados que permiten ajustar anualmente las ROP y el POA, y queestos planes de trabajo son conocidos por los responsables de los principales procesos del programa.

    21S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.2.2 DE LA ORIENTACIN HACIA RESULTADOS Y ESQUEMAS O PROCESOS DEEl programa utiliza informes de evaluaciones externas16

    a) De manera regular, es decir, uno de los elementos para la toma de decisiones sobrecambios al programa son los resultados de evaluaciones externas.

    b) De manera institucionalizada, es decir, sigue un procedimiento establecido en undocumento.

    c) Para definir acciones y actividades que contribuyan a mejorar su gestin y/o susresultados.

    d) De manera consensada, participan operadores, gerentes y personal de la unidad deplaneacin y/o evaluacin.

    Respuesta Si

    Nivel

    4

    El programa utiliza informes de evaluacin externa y tiene todas las caractersticasestablecidas.

    Justificacin:Desde 2007 el programa ha estado sujeto a diversas evaluaciones: Externa (EE) en 2007, 2008, 2009 y2010, de Diseo (ED) en el 2007 y Especfica de Desempeo (EED) en 2008, 2009-2010 y 2010-2011.Asimismo se han identificado Aspectos Susceptibles de Mejora (ASM) en 2007, 2008 y 2009, y se hanemitido Mecanismos para el Seguimiento a los ASM asociados a los Programas Anuales de Evaluacin2008 y 2009. No se tienen ASM en 2010. Para dar seguimiento a los ASM, el Programa Caravanas dela Salud (PCS) ha emitido posiciones institucionales (2008 y 2009), documentos de trabajo que abordanlos ASM especficos (2008 y 2009) y documentos institucionales (2008 y 2009) que abordan los ASMinstitucionales. Las EED reconocen que el programa ha hecho esfuerzos importantes para dar cauce alos ASM, cambios que, de aplicar, se reflejan en las Reglas de Operacin (ROP):i)Se ha mejorado la Matriz de Indicadores (Posicin Institucional EED 2008, EED 2010-2011).ii)Se han realizado evaluaciones externas anualmenteiii)Se ha trabajado en la definicin de poblacin potencial (EED 2009-2010), y se ha decidido clarificar ycuantificar la poblacin objetivo (Posicin Institucional EED 2010-2011).iv)Se ha trabajado en posibilitar la afiliacin al SPSS de la poblacin donde opera el PCS (EED 2009-2010 y EED 2010-2011).v)Se sustituyeron UMM que ya haban cumplido su vida til (EED 2010-2011).De acuerdo a los administradores del programas las acciones de mejora realizadas se han llevado acabo en forma consensada a travs de trabajo que incluye a la Direccin General Adjunta deCaravanas de la Salud y las dos direcciones de rea con sus respectivas reas subordinadas, y lasCoordinaciones del Programa en las 31 entidades federativas y el Distrito Federal.

    22S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Del total de los Aspectos Susceptibles de Mejora (ASM) clasificados como especficos y/oinstitucionales de los ltimos tres aos, qu porcentaje han sido solventados acorde con loestablecido en los documentos de trabajo y/o institucionales?

    17

    Respuesta Si

    Nivel

    3

    Del 70 al 84% del total de los ASM se han solventado y/o las acciones de mejoraestn siendo implementadas de acuerdo con lo establecido en los documentos detrabajo e institucionales.

    Justificacin:Todos los Aspectos Susceptibles de Mejora (ASM) han tratado de ser solventados, unos al 100% yotros en menor grado (ver Anexo 8 de este Informe).Acciones definidas en el Documento de Trabajo 2008:i) Cuantificacin de las poblaciones potencial, objetivo y atendida del programa: 66% de avance. Ladefinicin y cuantificacin de la poblacin potencial es clara, pero no se ha alcanzado una definicin nicuantificacin satisfactoria de la poblacin objetivo, tal como se explica en la Pregunta 7.ii) Diseo de una metodologa para identificar la morbilidad de la poblacin objetivo: 100% de avance.Con la evaluacin anual del programa, cambios en la Matriz de Indicadores para Resultados (MIR),evaluaciones externas y los informes gerenciales se ha avanzado en el establecimiento de un sistemade informacin en salud que registre y mida la morbilidad atendida y el impacto del programa; an asse considera que todava no se monitorean todas las acciones que debe realizar el programa, como porejemplo la participacin comunitaria.iii) Disear e implementar un programa de mantenimiento preventivo para las Unidades MdicasMviles (UMM): 60% de avance. Se cuenta con evidencia documental de acciones que est realizandoel Programa en la revisin de las Evaluaciones Externas (EE) (EED 2009-2010), con un informe de losprincipales resultados encontrados durante el monitoreo del programa donde se evala el estado fsicoy mecnico de las UMM. Se documenta adems que el Programa cuenta con un plan peridico y unmanual de procedimientos de mantenimiento para que se cuente con el equipo operativo mdiconecesario y en funcionamiento.

    Acciones definidas en el Documento Institucional 2008i) Acreditar las UMM tipo 0 conforme a la Direccin General de Calidad y Educacin en Salud (DGCES):84% de avance. Se acreditaron UMM tipo 0.ii) Adquisicin de UMM para sustituir unidades deterioradas: 100% de avance. Se sustituyeron UMMque haban agotado su vida til para mantener la calidad de los servicios y evitar la posibilidad de quelos equipos de salud itinerantes dejaran de cubrir sus rutas por fallas mecnicas en los vehculos (EED2010-2011).Acciones definidas en Documento Institucional 2009i) Posibilitar la afiliacin al Sistema de Proteccin Social en Salud (SPSS) de la poblacin donde opera:80% de avance. Se registraron avances en la promocin de afiliacin al SPSS de la poblacin dondeopera el Programa (EED 2009-2010 y EED 2010-2011).

    23S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Con las acciones definidas en los documentos de trabajo e institucionales, que a la fecha se hanimplementado, provenientes de los Mecanismos para el seguimiento a los aspectos susceptiblesde mejora derivados de informes y evaluaciones a los programas presupuestarios de laAdministracin Pblica Federal de los ltimos tres aos, se han logrado los resultadosestablecidos?

    18

    Justificacin:Se considera que se han logrado los resultados establecidos en casi todos los Aspectos Susceptiblesde Mejora (ASM) (ver Anexo 9 de este Informe).Acciones definidas en el Documento de Trabajo 2008:i) Cuantificacin de las poblaciones potencial, objetivo y atendida del programa: Las Reglas deOperacin (ROP) 2012 cuentan con la definicin y cuantificacin de la poblacin potencial, pero an nose tiene una cuantificacin satisfactoria de la poblacin objetivo.ii) Diseo de una metodologa para identificar la morbilidad de la poblacin objetivo: Las evaluacionesanuales del Programa, los cambios realizados en la Matriz de Indicadores para Resultados (MIR) y lainformacin definida en los Informes Gerenciales (especficamente el Anexo 7) son ejemplos de que seha avanzado en tener una metodologa para identificar las intervenciones en salud por grupo de edad ysexo para su medicin y seguimiento.iii) Disear e implementar un programa de mantenimiento preventivo para las Unidades MdicasMviles (UMM): informacin administrativa del programa permite verificar que existe un programaperidico de mantenimiento y un manual de procedimientos para analizar, verificar y dictaminar lacalidad del equipo mdico, aparatos, accesorios e instrumental de las UMM. Las acciones encaminadasa generar estos documentos se reflejan en las evaluaciones externas (EED 2009-2010). Asimismo, elPrograma documenta los principales resultados encontrados durante el monitoreo del estado fsico ymecnico de las UMM.

    Acciones definidas en el Documento Institucional 2008i) Acreditar las UMM tipo 0 conforme a la Direccin General de Calidad y Educacin en Salud (DGCES):Informacin del programa indic que se han acreditado 84% de las UMM tipo 0.ii) Adquisicin de UMM para sustituir unidades deterioradas: Se sustituyeron todas las UMM que habanagotado su vida til para mantener la calidad de los servicios.

    Acciones definidas en Documento Institucional 2009i) Posibilitar la afiliacin al Sistema de Proteccin Social en Salud (SPSS) de la poblacin donde opera:Se registraron avances en la promocin de afiliacin al SPSS de la poblacin donde opera el Programa.

    El equipo evaluador considera que el ASM inmediato es mejorar la MIR: i) redefinir el fin para que midaresultados de salud. Esta redefinicin implicara la generacin de indicadores y su medicin quepermitira evaluar si el programa logra su objetivo ltimo; ii) redefinir la medicin de la poblacinatendida con base en primera consulta al ao y no por el nmero de consultas, indicador en el que seest trabajando; y iii) incluir indicadores que capturen acciones de participacin comunitaria.

    24S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Qu recomendaciones de la(s) evaluacin(es) externa(s) de los ltimos tres aos no han sidoatendidas y por qu?

    19

    Justificacin:En los documentos de Posicin Institucional del programa no fue posible encontrar los avances de losAspectos Susceptibles de Mejora (ASM) y la justificacin en caso de que no hayan sido atendidos. Sinembargo, a partir de los informes de evaluaciones externas y de otros documentos institucionales fueposible reconocer que aunque la mayora de las recomendaciones de las evaluaciones externas hansido atendidas satisfactoriamente, quedan pendientes (ver Anexo 10 de este Informe).Si bien se ha trabajado en solventar la recomendacin de contar con un documento sobre lacuantificacin de la poblacin objetivo la respuesta no es plenamente satisfactoria. La poblacinobjetivo, se define ex post y no ex ante, como se explica en la pregunta 7. Cabe sealar que se haavanzado en cuantificar a la poblacin atendida, a partir de las acciones realizadas, ya que ambasdefiniciones no son sinnimas: una misma persona puede recibir diversas acciones de salud, con locual si se usa las acciones para cuantificar a la poblacin atendida, se est sobreestimando el dato.

    Por otro lado, las evaluaciones externas que se le han hecho al programa en 2008, 2009 y 2010identifican una serie de recomendaciones que no se traducen en ASM y por lo tanto su seguimiento noes tan directo. El portafolio de recomendaciones aborda mltiples aspectos que no es posible revisar eneste espacio. A continuacin nos enfocamos a los aspectos no atendidos que han sido una constanteen las evaluaciones externas 2008, 2009 y 2010:Establecer una definicin y cuantificacin de la poblacin objetivo, que s forma parte de un ASM.Mejorar la focalizacin del programa, incluyendo la supervisin en campo de las rutas y servicios.

    25S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    A partir del anlisis de las evaluaciones externas realizadas al programa y de su experiencia en latemtica qu temas del programa considera importante evaluar mediante instancias externas?

    20

    Justificacin:El Programa Caravanas de la Salud (PCS) ha tenido diversas evaluaciones: externa en 2007, 2008,2009 y 2010, de Diseo en el 2007 y Especfica de Desempeo en 2008, 2009-2010 y 2010-2011.

    En general las evaluaciones coinciden en que i) el PCS aborda un tema fundamental para el logro de lamejora de las condiciones de salud y la equidad; que en este sentido contribuye al logro de los objetivosdel Programa Sectorial de Salud (PROSESA) y del Plan Nacional de Desarrollo (PND) 2007-2012(anlisis previo en esta evaluacin y ED 2007); ii) por su diseo puede tener sinergias con otrosprogramas fundamentales para el desarrollo de Mxico, Sistema de Proteccin Social en Salud (SPSS)y el Programa de Desarrollo Humano Oportunidades (PDHO) Salud; aunque puede tener coincidenciascon el IMSS Oportunidades (anlisis previo en esta evaluacin y ED 2007); iii) el programa haincrementado paulatinamente su cobertura y tiene presencia en las 32 entidades federativas; aunquepuede tener problemas de focalizacin (EE 2008, EE 2009, EE 2010 EED 2010-2011); iv) el programaprovee los servicios establecidos en sus ROP (EED 2010-2011); v) el programa no genera lainformacin imprescindible para conocer la operacin, los servicios que proporciona, la poblacinbeneficiaria y los recursos que utiliza (EED 2010-2011).Desafortunadamente la informacin proporcionada en la EE 2010, que lleva a cabo un estudio decampo para evaluar los beneficios en salud para la poblacin objetivo (incluyendo utilizacin yresultados de salud) que es el fin del programa, no permite evaluar precisamente estos beneficios puesi) es un estudio de corte transversal y ii) los problemas de focalizacin del programa impiden tenergrupos de tratamiento y control robustos.

    Con base en lo anterior el equipo evaluador considera prioritario i) realizar una evaluacin de procesoscon foco principal en verificar la cobertura del PCS, y ii) considerar la posibilidad de llevar a cabo unaevaluacin de impacto (pues el nivel de cobertura hoy lo dificulta) que realmente permita medir losefectos causales del PCS en los resultados de salud de la poblacin atendida. La evaluacin deimpacto complementara la informacin que ya se provee en la EE 2010 y permitira llevar a cabo unanlisis costo-efectividad.

    26S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.2.3 DE LA GENERACIN DE INFORMACINEl Programa recolecta informacin acerca de:21

    a) La contribucin del programa a los objetivos del programa sectorial, especial o institucional.b) Los tipos y montos de apoyo otorgados a los beneficiarios en el tiempo.c) Las caractersticas socioeconmicas de sus beneficiarios.d) Las caractersticas socioeconmicas de las personas que no son beneficiarias, con fines de

    comparacin con la poblacin beneficiaria.Respuesta Si

    Nivel

    2

    El programa recolecta informacin acerca de dos de los aspectos establecidos

    Justificacin:Como se mencion en la pregunta 4, el Programa contribuye al Objetivo 2 del Programa Sectorial deSalud (PROSESA) al intentar reducir las brechas en salud de los 125 municipios de menor ndice deDesarrollo Humano (IDH) del pas proporcionando servicios de salud de prevencin, promocin y deatencin que inciden en la disminucin de la mortalidad materna y la mortalidad infantil, metas que sehan definido en el PROSESA. En los Informes Gerenciales (ver Anexo 7 de los Informes Gerenciales)se pueden encontrar los indicadores de desempeo en la prestacin del servicio. En cuanto a lamortalidad materna, se registra el total de mujeres embarazadas, mujeres embarazadas de alto riesgo ymujeres embarazadas de alto riesgo referidas a unidades mdicas de mayor complejidad. En el caso dela mortalidad infantil, se registra i) desnutricin: nios con desnutricin y nios con desnutricinrecuperados, ii) Enfermedad Diarreica Aguda (EDA): consultas de EDA en menores de 5 aos, casosde EDA en menores de 5 aos con Plan A, casos de EDA en menores de 5 aos con Plan B y madrescon nios menores a 5 aos capacitadas en signos de alarma de EDA, y iii) Infeccin RespiratoriaAguda (IRA): consultas de IRA en menores de 5 aos, casos de IRA en menores de 5 aos contratamiento sintomtico, casos de IRA en menores de 5 aos con tratamiento antibitico y madres connios menores de 5 aos capacitadas en signos de alarma de IRA. Cabe notar que el programa nocaptura el nmero de defunciones en ningn caso ni tiene denominadores para calcular Tasas deMortalidad Infantil (TMI).Asimismo, en los Informes Gerenciales se recolecta informacin sobre los tipos y monto de apoyootorgados a los beneficiarios en el tiempo. Se obtiene informacin del nmero total de consultas deprimera vez y consultas subsecuentes, nmero total de atenciones de promocin y prevencinotorgadas, atenciones con acciones del Catlogo Universal de Servicios de Salud (CAUSES)otorgadas, y total de atenciones otorgadas.

    El programa no recolecta informacin de las caractersticas socioeconmicas de los beneficiarios y delas caractersticas socioeconmicas de las personas que no son beneficiarias pues no es necesariapara que se otorgue el apoyo; aunque el equipo evaluador considera que la informacinsocioeconmica de beneficiarios y no beneficiarios longitudinal es tila para mejorar la planeacin yevaluar el efecto del programa (ya que son variables que influyen en los resultados de salud).

    27S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    El programa recolecta informacin para monitorear su desempeo con las siguientescaractersticas:

    22

    a) Es oportuna.b) Es confiable, es decir, est validada por quienes las integran.c) Est sistematizada.d) Es pertinente respecto de su gestin, es decir, permite medir los indicadores de Actividades

    y Componentes.e) Est actualizada y disponible para dar seguimiento de manera permanente.

    Respuesta Si

    Nivel

    4

    La informacin que recolecta el programa cuenta con todas las caractersticasestablecidas.

    Justificacin:Los administradores del Programa recolectan informacin para monitorear su desempeo. En losInformes Gerenciales (ver Anexo 7 de los Informes Gerenciales) se registran indicadores dedesempeo en la prestacin de servicio por entidad federativa para la infraestructura, la cobertura, lasacciones otorgadas y los padecimientos comunes y acciones de prevencin: i) infraestructura: nmerode caravanas. ii) cobertura: nmero de familias por caravana, nmero de familias en el total delocalidades atendidas en el estado, nmero total de nios menores de 5 aos, nmero total de mujeresde 15-64 aos, nmero total de hombres mayores a 20 aos, nmero total de mujeres mayores a 20aos, nmero total de mujeres embarazadas, nmero de escuelas en el rea, nmero total de consultasde primera vez y nmero total de consultas subsecuentes, iii) acciones otorgadas: nmero de accionesde promocin y prevencin otorgadas, nmero de acciones del Catlogo Universal de Servicios deSalud (CAUSES) otorgadas y total de acciones otorgadas, y iv) padecimientos y acciones deprevencin: nios con desnutricin, Enfermedad Diarreica Aguda (EDA) o Infeccin Respiratoria Aguda(IRA), pacientes con diabetes mellitus, hipertensin arterial, sndrome metablico o dislipidemia,mujeres que se realizaron el Papanicolaou, mujeres con dislapsia, cncer crvico uterino, diagnsticosospechoso de cncer de mama, embarazadas y embarazadas de alto riesgo, y atenciones dentales enlas escuelas.

    El equipo evaluador considera que la informacin es oportuna, confiable, sistematizada, actualizada ypertinente. Oportuna ya que son indicadores de desempeo relacionados con los objetivos delprograma y del Programa Sectorial de Salud (PROSESA). Confiable pues son datos gerencialesreportados por cada una de las unidades mviles de las caravanas de salud. Sistematizada ya que esuna base de datos que se encuentra disponible al pblico en general en la pgina web del Programa.Pertinente porque permite medir indicadores de actividades y componentes; actualizada pues se tienendatos desde el 2007 al ltimo periodo disponible del 2012. No obstante, an cuando las evaluacionesexternas de 2009 y 2010 indagan sobre la participacin comunitaria, el equipo evaluador considera quean hace falta monitorear acciones de participacin social y comunitaria como lo establecen las Reglasde Operacin (ROP) 2012 en sus objetivos especficos (inciso 4.2), con indicadores de la Matriz deIndicadores para Resultados (MIR).

    28S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.3 COBERTURA Y FOCALIZACINIV.3.1 ANLISIS DE COBERTURA

    El programa cuenta con una estrategia de cobertura documentada para atender a su poblacinobjetivo con las siguientes caractersticas:

    23

    a) Incluye la definicin de la poblacin objetivo.b) Especifica metas de cobertura anual.c) Abarca un horizonte de mediano y largo plazo.d) Es congruente con el diseo del programa.

    Respuesta Si

    Nivel

    3

    La estrategia de cobertura cuenta con tres de las caractersticas establecidas.

    Justificacin:En las Reglas de Operacin (ROP) 2012 se ha incluido la definicin de la poblacin objetivo.Textualmente el inciso 5.5 de las ROP 2012 dice El Programa define como poblacin objetivo a latotalidad de personas cubiertas por el programa. Como se explica en la Pregunta 7, esta definicin noes satisfactoria en opinin del equipo evaluador, pues la contabilizacin de la poblacin objetivo serealiza ex post, y no ex ante, como una meta a ser cubierta. Las ROP no especifican en nmero lapoblacin objetivo.Los administradores del Programa Caravanas de la Salud (PCS) argumentan que como parte de losejercicios de planeacin, se realiza ao con ao una cuantificacin de la poblacin objetivo. El Sistemade Validacin de Rutas del Programa Caravanas de la Salud es el sistema administrativo que se usapara calcular la poblacin objetivo. Este programa condensa las localidades propuestas por los estadosy permite identificar i) su ndice de desarrollo humano a nivel municipal, ii) su ndice de marginacin anivel localidad y, iii) la distancia lineal al centro de salud ms cercano; con lo cual se verifica que laslocalidades propuestas cumplan con los requisitos establecidos en las ROP. Actualmente se cuantificaen 3,779,118 intervenciones (ver Pregunta 25). Este sistema al ser un sistema administrativo se revisa yactualiza constantemente, pero no abarca un horizonte de mediano y largo plazo. No obstante, seestablece en las ROP que la cobertura del programa se lograr simultneamente con el Sistema deProteccin Social en Salud (SPSS) siempre y cuando existan los recursos presupuestales necesarios(inciso 5.2).La poblacin cubierta por el programa, que es la poblacin objetivo de acuerdo a la definicin en lasROP, tiene las caractersticas que busca atender el PCS, por lo que el equipo evaluador considera quela poblacin objetivo es consistente con el diseo del programa, aunque se debe recordar que lasevaluaciones externas alertan sobre problemas de focalizacin.

    29S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    El programa cuenta con mecanismos para identificar su poblacin objetivo? En caso de contarcon estos, especifique cules y qu informacin utiliza para hacerlo.

    24

    Justificacin:El Programa de Accin Especfico (PAE) 2007-2012 y las Reglas de Operacin (ROP) 2012 definen a lapoblacin objetivo como aquella que vive en localidades que, tienen un bajo ndice de DesarrolloHumano (IDH), que estn catalogadas como de alta o muy alta marginacin o, que tienen problemas detamao, marginacin, dispersin geogrfica y dificultad de acceso. As mismo, el programa definecuatro vertientes de focalizacin (ver inciso 5.3 de las ROP 2012 para el detalle): i) 125 municipios demenor IDH en 7 estados prioritarios del pas: Chiapas, Durango, Guerrero, Nayarit, Oaxaca, Puebla yVeracruz; ii) localidades de alta y muy alta marginacin aunque el municipio no sea catalogado como demenor IDH que se consideren como geogrficamente dispersas y que carezcan de acceso regular aservicios de salud en todas las entidades federativas; iii) localidades con problemas de acceso a lainfraestructura de salud en todas las entidades y iv) personas que estn ubicadas temporalmente enconcentraciones masivas que requieran servicios de salud del primer nivel de atencin.

    Para identificar a la poblacin objetivo se requiere informacin a nivel municipal del IDH que publicaPrograma de las Naciones Unidas para el Desarrollo (PNUD), a nivel localidad del ndice demarginacin del Consejo Nacional de Poblacin (CONAPO) e indicadores de acceso a infraestructuramdica. El PAE 2007-2012 cuenta con estrategias y lneas de accin para identificar a la poblacinobjetivo anualmente. La estrategia 1 se refiere a la ampliacin de la cobertura de los servicios de saludmediante la planeacin de cada una de las rutas. Para esto, el programa establece como lneas deaccin: i) elaborar y actualizar anualmente los diagnsticos de salud de los 125 municipios de menorIDH y de los municipios y localidades de muy alta y alta marginacin de las 32 entidades federativas; ii)elaborar y actualizar la metodologa para la planeacin anual de nuevas rutas de Caravanas de la Saludy; iii) elaborar, proponer, difundir, capacitar e instrumentar la metodologa para el diseo y actualizacinde los mapas geo-referenciados de las rutas. La informacin disponible sugiere que no se realiza eldiagnstico anual de salud. No se puede verificar con la informacin disponible la falta de acceso, enausencia del Programa Caravanas de la Salud (PCS), de las localidades en cuestin. Para laplaneacin anual de las nuevas rutas existe un manual de procedimientos y un sistema electrnico devalidacin de rutas que con el que se pretende evitar que se duplique el servicio en las localidades.

    El equipo evaluador considera que no es posible actualizar la informacin de condicionessocioeconmicas y de salud anualmente. Sera muy til sin embargo que se actualizara la cuantificacinde la poblacin potencial y objetivo con informacin con base en el Censo 2010.

    30S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    A partir de las definiciones de la poblacin potencial, la poblacin objetivo y la poblacin atendida,cul ha sido la cobertura del programa?

    25

    Justificacin:La poblacin potencial, a cubrirse paralelamente a la extensin del Sistema de Proteccin Social enSalud (SPSS) si los recursos presupuestales son suficientes, se calcula (con base en el conteo 2005)en 3.9 millones de personas en 20,000 localidades. La poblacin objetivo no se cuantifica ex ante, y dehecho en la definicin coincide con la poblacin atendida (ver Pregunta 7 y 23).Los informes gerenciales del Programa Caravanas de la Salud (PCS) reportan que en abril de 2011 setenan cubiertas aproximadamente 16 mil localidades. La poblacin atendida en intervenciones de saluda la comunidad son los habitantes de estas localidades. Ahora bien, la poblacin atendida enintervenciones de salud a la persona (atencin mdica preventiva y curativa) no se puede calcular, pueshasta muy recientemente el programa registraba intervenciones y no personas atendidas. As el nmerode 3,779,118 que se reporta como poblacin atendida puede estar sobreestimando la cobertura puesuna persona pudo haber recibido ms de una intervencin. Los administradores del PCS indican que enabril de 2012 ya estar disponible la informacin para calcular correctamente la poblacin atendida. Lacobertura (medida con intervenciones) vara significativamente por entidad federativa.Es importante sealar que PCS reporta adems cobertura de intervenciones especficas por grupopoblacional. As, de acuerdo al perfil demogrfico de la poblacin edad y sexo- los administradores delPCS calculan el nmero de acciones que se deben realizar y las acciones ya efectuadas.

    No obstante, las evaluaciones externas de 2008, 2009 y 2010 alertan sobre problemas de cobertura delocalidades y de cobertura donde ya existen otros servicios de salud (ver Pregunta 47). El equipoevaluador considera relevante llevar a cabo una nueva evaluacin externa de procesos con especialnfasis en la cobertura (localidades, personas y servicios), pues la situacin pudo haber cambiado en elltimo ao, especialmente en respuesta a una mejor validacin de rutas. Hoy los administradores delPCS se basan en el Sistema de Validacin de Rutas para verificar que las rutas propuestas por lasentidades cumplan con los requisitos de inclusin: ndice de marginacin, ndice de desarrollo humano ydistancia a una unidad mdica fija.

    31S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    IV.4 OPERACINIV.4.1 ANLISIS DE LOS PROCESOS ESTABLECIDOS EN LAS ROP O NORMATIVIDAD

    Describa mediante Diagramas de Flujo el proceso general del programa para cumplir con losbienes y los servicios (Componentes), as como los procesos clave en la operacin del programa.

    26

    Justificacin:El Programa tiene como proceso general una estrategia de implantacin operativa, definida en elPrograma de Accin Estratgico (PAE) 2007-2012 y en las Reglas de Operacin (ROP), por medio dela cual pretende cumplir con los Componentes. Esta estrategia es un modelo operativo que define loscriterios de atencin, la forma en la que se deben establecer y validar las rutas, la estructura y losniveles de responsabilidad, las etapas de instrumentacin y las acciones de mejora de la gestinpblica. De esta forma las Caravanas proveen de servicios de salud a la poblacin objetivootorgndoles servicios de promocin y prevencin y servicios de atencin mdica ambulatoria.

    Adems, el Programa cuenta con varios manuales de procedimientos clave para lograr sus objetivos.Entre ellos estn: el procedimiento para determinar los criterios y la metodologa de validacin de rutasnuevas, Unidades Mdicas Mviles (UMM), equipos de salud itinerantes del programa, el procedimientopara impulsar la capacitacin del programa, procedimiento para analizar, verificar y dictaminar la calidaddel equipo mdico, aparatos, accesorios e instrumental de las UMM, el procedimiento para la atencinde solicitudes de informacin en asuntos relacionados con el programa, el procedimiento para laimplementacin del sistema integral de informacin del programa y el procedimiento de supervisin porentidad federativa. En todos estos manuales se realiza una descripcin del procedimiento, la secuenciade etapas, la actividad y el responsable. Adems, los manuales cuentan con diagramas de flujo en loscuales se explica de manera descriptiva y ordenada el proceso.

    En el Anexo 13 de este Informe se escribe el proceso principal y se seala como se articulan otrosprocesos especficos.

    32S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Solicitud de Apoyos

    El programa cuenta con informacin sistematizada que permite conocer la demanda total deapoyos y las caractersticas de los solicitantes? (socioeconmicas en el caso de personas fsicasy especficas en el caso de personas morales)

    27

    Respuesta Si

    Nivel

    3

    El programa cuenta con informacin sistematizada que permite conocer la demandatotal de apoyos y las caractersticas de los solicitantes.

    Justificacin:Los apoyos a los beneficiarios que otorga el programa son intervenciones de salud a la comunidad eintervenciones de salud a la persona. En el primer caso no aplica el concepto de demanda total, pueses un bien con caractersticas de bien pblico. En el segundo caso, el apoyo est constituido por lasintervenciones de salud a la persona: las intervenciones mdicas del Catlogo Universal de Serviciosen Salud (CAUSES) y las acciones de promocin y prevencin.En este caso la demanda de apoyos son las consultas mdicas demandadas por los habitantes quevisitan las Unidades Mdicas Mviles (UMM). Los administradores del programa informan que seatienden a todas las personas que lo demandan. El perfil socioeconmico de los beneficiarios no es unavariable relevante para otorgar el apoyo.

    33S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Los procedimientos para recibir, registrar y dar trmite a las solicitudes de apoyo cuentan con lassiguientes caractersticas:

    28

    a) Corresponden a las caractersticas de la poblacin objetivo.b) Existen formatos definidos.c) Estn disponibles para la poblacin objetivo.d) Estn apegados al documento normativo del programa.

    Respuesta No Aplica

    Justificacin:Las Reglas de Operacin (ROP) 2012 establecen que una vez que llega la Unidad Mdica Mvil (UMM)a una comunidad se atender a la poblacin residente demandante de los servicios incluidos y sellevarn a cabo acciones de promocin y prevencin. La solicitud de apoyo, consiste en solicitar unaatencin mdica, cuyo procedimiento no requiere que se verifique si las caractersticas coincidan con lapoblacin objetivo (coincidan por definicin pues es all donde llegan las UMM). El documentonormativo no especifica cmo se lleva a cabo el orden de la atencin mdica ni si debe existir unformato definido para el ordenamiento. Los administradores del programa indican que se atienden atodos los que demandan una atencin.

    34S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    El programa cuenta con mecanismos documentados para verificar el procedimiento para recibir,registrar y dar trmite a las solicitudes de apoyo con las siguientes caractersticas:

    29

    a) Son consistentes con las caractersticas de la poblacin objetivo.b) Estn estandarizados, es decir, son utilizados por todas las instancias ejecutorasc) Estn sistematizados.d) Estn difundidos pblicamente.

    Respuesta No Aplica

    Justificacin:Como se explica en la pregunta 28, el Programa no requiere tener mecanismos documentados paraverificar el procedimiento de recibir, registrar y dar trmite a las solicitudes de apoyo, pues lasCaravanas atienden a todos los que solicitan atencin mdica. No obstante, se sugiere que el programaestablezca una cartilla de citas mdicas pues es muy til para dar seguimiento a embarazadas ypersonas con enfermedades crnicas.

    35S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Seleccin de beneficiarios y/o proyectos

    Los procedimientos del programa para la seleccin de beneficiarios y/o proyectos tienen lassiguientes caractersticas:

    30

    a) Incluyen criterios de elegibilidad claramente especificados, es decir, no existe ambigedaden su redaccin.

    b) Estn estandarizados, es decir, son utilizados por todas las instancias ejecutoras.c) Estn sistematizados.d) Estn difundidos pblicamente.

    Respuesta Si

    Nivel

    4

    Los procedimientos para la seleccin de beneficiarios y/o proyectos tienen todas lascaractersticas establecidas.

    Justificacin:Antes de describir los procedimientos es importante sealar que en el programa no se seleccionanbeneficiarios y/o proyectos; sino localidades.

    En los numerales 5.4, 5.6 y 5.7 de las Reglas de Operacin (ROP) 2012 se describen los criterios deinclusin de localidades, que sern objeto de visita de las Unidades Mdicas Mviles (UMM). Las ROPson muy claras al establecer que el programa atender a personas que habiten en municipioscatalogados como de menor ndice de Desarrollo Humano (IDH); o a personas que habiten enlocalidades con alto y muy alto grado de marginacin; o a personas que habiten en localidades que nocuenten con acceso a servicios de salud; o a personas que se encuentren en sitios donde por razonesde emergencia sanitaria, emergencia epidemiolgica, desastre natural y/o concentracin masiva hayaun incremento en la demanda de servicios.

    El programa cuenta con un manual de procedimiento para determinar los criterios y la metodologa devalidacin de rutas nuevas, UMM, equipos de salud itinerantes del programa (ver anexo 13 de esteInforme para descripcin del procedimiento). Finalmente, los administradores del programa con base enel Sistema de Validacin de Rutas verifican que las rutas propuestas por los estados cumplan con loscriterios de inclusin. Todas las instancias ejecutoras del programa, que son los estados a travs de susservicios de salud, participan en este proceso siguiendo siempre el mismo procedimiento, que les esfamiliar; por lo cual el equipo evaluador considera que los procedimientos estn estandarizados,sistematizados y estn difundidos pblicamente.

    36S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    El programa cuenta con mecanismos documentados para verificar el procedimiento de seleccinde beneficiarios y/o proyectos y tienen las siguientes caractersticas:

    31

    a) Permiten identificar si la seleccin se realiza con base en los criterios de elegibilidad yrequisitos establecidos en los documentos normativos.

    b) Estn estandarizados, es decir son utilizados por todas las instancias ejecutoras.c) Estn sistematizados.d) Son conocidos por operadores del programa responsables del proceso de seleccin de

    beneficiarios y/o proyectos.Respuesta Si

    Nivel

    4

    Los mecanismos para verificar la seleccin de beneficiarios y/o proyectos tienen todaslas caractersticas establecidas.

    Justificacin:El numeral 6.9 de las Reglas de Operacin (ROP) 2012 establece a la Direccin General de Planeaciny Desarrollo en Salud de la Secretara de Salud (DGPLADES) como el rea responsable de supervisarde manera aleatoria que las Unidades Mdicas Mviles (UMM) del Programa en las entidadesfederativas realmente estn cubriendo la totalidad de las rutas y estn prestando los serviciosestablecidos en las ROP. Por medio de este mecanismo de supervisin se pretende medir eldesempeo en la operacin de las UMM y fortalecer la capacidad tcnica de los recursos humanos,mejorar el rendimiento de las actividades y dar capacitacin de forma continua.Para la realizacin de esta responsabilidad la DGPLADES se apoya en el manual de procedimientos:Supervisin al Programa Caravanas de la Salud. Las actividades que describe el manual son: i)Elaboracin de un cronograma de supervisin; ii)Seleccin de rutas a supervisar; iii)Levantamiento de lainformacin a travs de la cdula creada exprofeso para el proceso de supervisin; iv)Asesora yeducacin continua en servicio; v)Elaboracin de informe de supervisin para las autoridades de saludsobre las observaciones obtenidas durante la proceso de supervisin; vi)Anlisis de la informacinobtenida; vii)Elaboracin de un Programa de Mejora; y viii)Seguimiento al Programa de Mejora.El equipo evaluador tuvo acceso a los resultados de la supervisin del estado de Quintana Roo delsegundo semestre de 2011. En dicho anlisis se documenta el nmero de UMM en operacin, losmunicipios y localidades programados y visitados, la poblacin programada y beneficiada, as como losresultados de los indicadores de desempeo (ver pregunta 21). Se documenta en un cuadro el reasupervisada, la situacin encontrada, el responsable y las recomendaciones y compromisos. Asimismose realiza una lista de los insumos faltantes: medicamentos, material de curaciones y enfermera yrecursos materiales. Por ltimo se enlistan las generalidades de la supervisin.

    Este mecanismo de verificacin del procedimiento al estar definido en las ROP, tener un manual deprocedimientos y tomar como base de evaluacin las rutas previamente autorizadas permite verificar laseleccin con base en los criterios de elegibilidad, est estandarizado, sistematizado y es conocido porlos operadores.

    37S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    Tipos de apoyos

    Los procedimientos para otorgar los apoyos a los beneficiarios tienen las siguientescaractersticas:

    32

    a) Estn estandarizados, es decir, son utilizados por todas las instancias ejecutoras.b) Estn sistematizados.c) Estn difundidos pblicamente.d) Estn apegados al documento normativo del programa.

    Respuesta Si

    Nivel

    4

    Los procedimientos para otorgar los apoyos a los beneficiarios tienen todas lascaractersticas establecidas.

    Justificacin:Los apoyos en el Programa Caravanas de la Salud (PCS) son los servicios de prevencin, promocin,participacin comunitaria y atencin de la salud, que est constituida por los beneficios incluidos en elCatlogo Universal de Servicios de Salud (CAUSES). Las Reglas de Operacin (ROP) 2012 en suinciso 6.2.1 regulan los procesos para la entrega de las acciones de promocin, prevencin yparticipacin comunitaria. Por su parte, los incisos 6.2.2 y 6.2.3 definen los servicios de atencin mdicaque se le proporcionarn a la poblacin beneficiario. Dado que quieren operan el programa en losestados son los servicios estatales de salud, la entrega de estos beneficios se vuelve una obligacinque se plasma en los convenios de colaboracin que se firman entre la federacin y los estados.

    Con base en el argumento anterior, el equipo evaluador considera que la normatividad de losprocedimientos para otorgar los apoyos cumple con las cuatro caractersticas deseables.

    38S200

  • Caravanas de la Salud

    Evaluacin de Consistencia y Resultados 2011-2012

    El programa cuenta con mecanismos documentados para verificar el procedimiento de entregade apoyos a beneficiarios y tienen las siguientes caractersticas:

    33

    a) Permiten identificar si los apoyos a entregar son ac