¿Porqué aprender a muestrear

bien? (Parte 2)Dr. José Dionicio Zacarias Flores

(Apuntes derivados del libro: Sampling: Design and Analysis, Autor: Sharon L. Lohr)

El Sesgo de Medición

Introducción Una buena muestra tiene respuestas precisas a loselementos de interés.

El sesgo de medición ocurre cuando el instrumento demedición tiene una tendencia a diferir del valorverdadero en una dirección.

Al igual que con el sesgo de selección, el sesgo demedición debe considerarse y minimizarse en la etapade diseño de la encuesta.

Ejemplo Ninguna cantidad de análisis estadísticorevelará, por ejemplo, que la básculaagregó erróneamente 5 kilogramos al pesode cada persona en una encuesta desalud.

El sesgo de medición es una preocupaciónen todas las encuestas y puede sermalicioso.

Ejemplo En muchos estudios de vegetación, porejemplo, las áreas a muestrear se dividenen parcelas más pequeñas.

Se selecciona una muestra de parcelas y seregistra el número de plantas en cadaparcela. Cuando una planta está cerca dellímite de la región, el investigador decampo debe decidir si incluir la planta en elrecuento.

Ejemplo Es probable que una persona que incluyetodas las plantas cerca o en el límite en elrecuento produzca una estimación delnúmero total de plantas en el área que esdemasiado alta porque algunas plantaspueden contarse dos veces.

A veces, el sesgo de medición esinevitable. En la Encuesta de AvesReproductoras de América del Norte, losobservadores se detienen cada media millaen las rutas designadas y cuentan todas lasaves escuchadas cantando o llamando oavistadas dentro de un radio de un cuartode milla (Droege 1990).

El conteo de aves para ese punto es casisiempre una subestimación del número de avesen el área.Los modelos estadísticos posiblemente sepueden utilizar para ajustar el sesgo demedición.Si los datos se recopilan con el mismoprocedimiento y con observadores conhabilidades similares de un año a otro, laencuesta se puede usar para estimar lastendencias en la población de diferentesespecies; se espera que los sesgos de losdiferentes años sean similares y se puedancancelar cuando las diferencias que secalculen se produzcan año tras año.

Obtener respuestasprecisas es un desafío entodo tipo de encuestas,pero particularmente enencuestas de personas

La gente a veces no dice la verdad.

En una encuesta agrícola, los agricultoresen un área con programas de ayudaalimentaria pueden no reportar elrendimiento de los cultivos, esperandoobtener más ayuda alimentaria.

Obtener respuestas veraces es un desafíoparticular en las encuestas que involucrantemas delicados, como las encuestas sobreel consumo de drogas.

La gente no siempreentiende las preguntas.

La gente olvidaUn problema que enfrenta el diseño de laEncuesta Nacional de Victimización delDelito es el efecto “telescopio”: a laspersonas se les pregunta sobre lasexperiencias como víctimas de delitos quetuvieron lugar en los últimos seis meses, peroalgunas incluyen victimizaciones queocurrieron hace más de seis meses.

Las personas dan diferentes respuestas a diferentes entrevistadores

Schuman y Converse (1971) emplearonentrevistadores blancos y negros para entrevistara los residentes negros de Detroit. A la pregunta"¿Crees personalmente que puedes confiar en lamayoría de los blancos, en algunos o enninguno?" La respuesta del 35% de losentrevistados por una persona blanca fue quepodían confiar en la mayoría de las personasblancas. El porcentaje fue del 7% para losentrevistados por una persona negra.

No es justo traer a los niños al mundo, como se ven las cosas para el futuro.

Los niños nacidos hoy tienen un futuro maravilloso que esperar.

Las personas pueden decir lo que creen que un entrevistador quiere escuchar o lo que creen que impresionará a los entrevistados.

Un entrevistador en particular puedeafectar la precisión de la respuesta alleer mal las preguntas, registrar lasrespuestas de manera incorrecta oantagonizar con el encuestado.

Ciertas palabras significan cosasdiferentes para diferentes personas.

Ejemplo del sesgoUna pregunta simple como "¿Tienes un auto?" puede ser respondido sí o no, dependiendo de la interpretación que usted haga del encuestado (¿se refiere solo al individuo o al hogar?), propio (¿cuenta como propiedad si está haciendo pagos a una compañía financiera?) o automóvil ( ¿Están incluidas las camionetas?).

La redacción y el orden de las preguntas tienen un gran efecto en las respuestas obtenidas.

Ejemplo del sesgoDos encuestas se tomaron a fines de 1993 y principios de1994 sobre Elvis Presley. Una encuesta preguntó: "En losúltimos años, ha habido muchos rumores e historiassobre si Elvis Presley está realmente muerto. ¿Cómo tesientes acerca de esto? ¿Crees que hay algunaposibilidad de que estos rumores sean ciertos y que ElvisPresley todavía está vivo? ¿o no lo crees?La otra encuesta preguntó: "Un programa de televisiónreciente examinó varias teorías sobre la muerte de ElvisPresley. ¿Crees que es posible que Elvis esté vivo o no?"Para la primera encuesta, el 8% de los encuestados dijoque es posible que Elvis todavía esté vivo; En la segundaencuesta, el 16% de los encuestados dijo que es posibleque Elvis todavía esté vivo.

Diseño de cuestionarios

Muestreo

Introducción Se presenta una introducción muy breve a

las preguntas de escritura y evaluación deuna encuesta, así como se proporcionanalgunas pautas generales y ejemplos.

Decide qué quieres averiguar.

Este es el paso más importante paraescribir un cuestionario.

Escriba los objetivos de su encuesta ysea preciso

Ejemplo "Quiero aprender algo sobre las personas sinhogar" no servirá. En cambio, escriba preguntasespecíficas como "¿Qué porcentaje depersonas que usaron refugios para personas sinhogar en Chicago entre enero y marzo de 1996tienen menos de 16 años?"

Luego, escriba o seleccione preguntas quegeneren respuestas precisas a las preguntas deinvestigación y que alienten a las personas dela muestra a responder las preguntas.

Siempre pruebe sus preguntas antes de completar la encuesta.

Idealmente, las preguntas se evaluarían en una pequeña muestra de miembros de la población objetivo.

Pruebe diferentes versiones para las preguntas y pregunte a los encuestados en su prueba previa cómo interpretan las preguntas.

Ejemplo La Encuesta Nacional de Victimización del

Delito (NCVS) se probó durante varios añosantes de realizarse a escala nacional(Lehnen y Skogan 1981).

El cuestionario fue revisado en 1985 ynuevamente en 1991 para hacer uso deinvestigaciones recientes en psicologíacognitiva e incluir temas, como elcomportamiento de las víctimas y losespectadores, que no se encontraron en lasversiones anteriores.

Ejemplo El NCVS ha sido criticado por no

denunciar el delito de violación. Cuandoel cuestionario se diseñó a principios dela década de 1970, existía lapreocupación de que preguntar sobre laviolación directa se percibiera comoinsensible y vergonzoso y provocaría laindignación del Congreso.

Ejemplo Hasta antes de 1990 las encuestas

arrojaban un número bajo deviolaciones, pero cuando se preguntó dela violación de manera directa, elnúmero de casos se duplicó.

Ejemplo No necesariamente captará

interpretaciones erróneas de laspreguntas probándolas con amigoso colegas; sus amigos y colegaspueden tener antecedentessimilares a los suyos y no tener lamisma comprensión de laspalabras que las personas de supoblación objetivo.

Mantenlo simple y claro.

Las preguntas que le parecen claras pueden no ser claras para alguien que escucha toda la pregunta por teléfono o para una persona con un idioma nativo diferente.

Ejemplo Belson (1981) probó la pregunta "¿Qué proporción de su tiempo de ver la televisión ves en programas de noticias?" en 53 personas. Solo 14 personas interpretaron correctamente la palabra proporción como "porcentaje", "parte" o "fracción". Otros lo interpretaron como "cuánto tiempo miras" o "qué programas de noticias ves".

Use preguntas específicas en lugar de las generales, si es posible.

Ejemplo Strunk y White aconsejan a los escritores que "prefieran lo específico a lo general, lo definido a lo vago, lo concreto a lo abstracto" (1959). Buenas preguntas resultan de una buena escritura. En lugar de preguntar "¿Alguien te atacó en los últimos seis meses?"

El NCVS hace una serie de preguntas específicas que detallan cómo uno podría ser atacado. La pregunta del NCVS es:"¿Alguien lo ha atacado o amenazado de alguna de

estas maneras: (a) Con cualquier arma, por ejemplo, una pistola o cuchillo, (b) Con algo como un bate de béisbol, sartén, tijeras o palo"

Relacione sus preguntas con el concepto de interés. Esto parece obvio, pero se olvida o se ignora en muchas encuestas.

ReflexionarEn algunas disciplinas, se ha desarrollado yprobado un conjunto estándar de preguntas,que luego son utilizadas por investigadoresposteriores.

A menudo, el uso de un instrumento de encuestacomún permite comparar los resultados dediferentes estudios. Sin embargo, en algunoscasos, las preguntas estándar son inapropiadaspara abordar las hipótesis de investigación.

Decide si usar preguntas abiertas o cerradas.

Una pregunta abierta (al encuestado no se le solicitan categorías de respuestas) permite a los encuestados formar sus propias categorías de respuesta;

En una pregunta cerrada (opción múltiple), el encuestado elige entre un conjunto de categorías leídas o mostradas en una tarjeta.

Cada una tiene sus ventajas.

Una pregunta cerrada puede hacer que el encuestado recuerde respuestas que de otro modo podrían olvidarse y está de acuerdo con el principio de que las preguntas específicas son mejores que las generales.

Si el tema ha sido ampliamente probado y se conocen respuestas de interés, una pregunta cerrada bien escrita generalmente generará respuestas más precisas.

Sin embargo, si la encuesta es exploratoria o las preguntas son delicadas, a menudo es mejor usar una pregunta abierta.

Importancia de informar lo obtenido de la pregunta real formulada.

Evite preguntas que inciten o motiven al entrevistado a decir lo que le gustaría escuchar.

Estas a menudo se llaman preguntas iniciales o cargadas.

Ejemplo El 17 de mayo de 1994 del Wall Street Journalinformó la siguiente pregunta formulada por laOrganización Gallup en una encuesta encargadapor el American Paper Institute: "Se estima que lospañales desechables representan menos del 2 porciento de la basura en los vertederos de hoy Por elcontrario, se estima que los contenedores debebidas, el correo de tercera clase y los desechosdel jardín representan aproximadamente el 21 porciento de la basura en los vertederos. Dado esto,en su opinión, ¿sería justo gravar o prohibir lospañales desechables?

Use preguntas de elección forzada, en lugar de estar de acuerdo / en desacuerdo.

Como se señaló anteriormente, algunas personas estarán de acuerdo con casi cualquier declaración.

Ejemplo

Diferencias de un experimento que compara estar de acuerdo / en desacuerdo con las versiones de elección forzada:

Ejemplo Pl: ¿Está de acuerdo o en desacuerdo con esta afirmación? La mayoría de los hombres están mejor preparados emocionalmente para la política que la mayoría de las mujeres.

P2: ¿Diría que la mayoría de los hombres están mejor preparados emocionalmente para la política que la mayoría de las mujeres, que los hombres y las mujeres están igualmente preparados, o que las mujeres están mejor preparadas que los hombres en esta área?

Resultado

Años de escolaridad0-11 12 13+

P1: porcentaje "de acuerdo“ 57 44 39P2: porcentaje "hombres mejor adaptados“ 33 38 28

Pregunte solo un concepto en cada pregunta.

En particular, evite lo que a veces sellaman preguntas de doble cañón,llamadas así porque si un cañón de laescopeta no lo atrapa, el otro lo hará.

Ejemplo La pregunta "¿Estás de acuerdo con el rescate de $ 50 mil millones de Bill Clinton a México?" apareció en una encuesta distribuida por un miembro de la Cámara de Representantes de los Estados Unidos a sus electores. La pregunta realmente confunde dos opiniones del entrevistado: la opinión de Bill Clinton y la opinión de la política de México.La desaprobación de cualquiera de las dos dará lugar a una respuesta "en desacuerdo" a la pregunta. Observe también el contenido cargado de la palabra rescate, que seguramente generará más respuestas negativas que el término paquete de ayuda.

Presta atención a los efectos del orden de las preguntas.

Si hace más de una pregunta sobre un tema, generalmente es mejor (pero no siempre) hacer primero la pregunta más general y seguirla con las preguntas específicas.

Hay tres justificaciones principales para usar el muestreo:

El muestreo puede proporcionar informaciónconfiable a un costo mucho menor que uncenso. Con las muestras de probabilidadpuede cuantificar el error de muestreo deuna encuesta.

Los datos se pueden recopilar más rápidamente, por lo que las estimaciones se pueden publicar de manera oportuna.

Finalmente, y menos conocido, lasestimaciones basadas en encuestas demuestra son a menudo más precisas que lasbasadas en un censo porque losinvestigadores pueden ser más cuidadososal recopilar datos. Un censo completo amenudo requiere una gran organizaciónadministrativa e involucra a muchaspersonas en la recopilación de datos.

Con la complejidad administrativa y la presión para producir estimaciones oportunas, muchos tipos de errores pueden inyectarse fácilmente en el censo.

En una muestra, se puede dedicar más atención a la calidad de los datos a través de la capacitación del personal y el seguimiento de los no encuestados.

Es mucho mejor tener buenas mediciones en una muestra representativa que mediciones poco confiables o sesgadas en toda la población.

Errores de muestreo y no muestreo

Introducción La mayoría de las encuestas de opinión que ve informan un margen de error.Muchos simplemente dicen que el margen de error es de 3 puntos porcentuales.El margen de error dado en las encuestas es una expresión de error de muestreo, el error que resulta de tomar una muestra en lugar de examinar a toda la población.Los errores de muestreo generalmente se informan en términos probabilísticos

Ejemplo

Si tomáramos una muestra diferente, probablemente obtendríamos un porcentaje de muestra diferente de personas que visitaron la biblioteca pública la semana pasada.

Reflexión El sesgo de selección y la inexactitud de lasrespuestas son ejemplos de errores que no son demuestreo, que son errores que no se puedenatribuir a la variabilidad de muestra a muestra.En muchas encuestas, el error de muestreo que seinforma para la encuesta puede ser insignificanteen comparación con los errores que no son demuestreo; a menudo ves encuestas con unarespuesta del 30% califica orgullosamenteproclamando su margen de error del 3%, mientrasignora el tremendo sesgo de selección en susresultados.

Problemas

Para cada una de las siguientesencuestas, describa la poblaciónobjetivo, el marco de muestreo,la unidad de muestreo y launidad de observación. Discutacualquier posible fuente de sesgode selección o inexactitud de lasrespuestas.

Problema 1El artículo "Lo que dicen los lectores sobre la marihuana"

informa que "más del 75% de los lectores queparticiparon en una encuesta telefónica informal dePARADE dicen que la marihuana debería ser tan legalcomo la rabia alcohólica" (Parade, 31 de julio de 1994,16).La encuesta telefónica se anunció en la página 5 de laedición del 12 de junio; los lectores recibieroninstrucciones de "llamar al 1-900-773-1200, a 75 centavospor llamada, si desea responder las siguientes preguntas.Use solo teléfonos de tonos. Para participar, llame entrelas 8 a.m. EDT [hora del este] el sábado 11 de junio y lamedianoche EDT el miércoles 15 de junio ".

Problema 2Un estudiante quiere estimar el porcentajede financieras de inversión cuyas accionessubieron de precio la semana pasada.Selecciona cada décimo listado definancieras en las páginas de financieras deinversión del periódico y calcula elporcentaje de aquellos en los que aumentóel precio de las acciones.

Problema 3Para estimar cuántos libros en la bibliotecanecesitan volver a encuadernarse, unbibliotecario usa una tabla de númerosaleatorios para seleccionar al azar 100ubicaciones en los estantes de la biblioteca.Luego camina a cada ubicación, mira ellibro que reside en ese lugar y registra si ellibro necesita volver a encuadernarse o no.

Problema 4Los jurados potenciales en algunas jurisdicciones se eligen de una listade residentes del condado que son votantes registrados oconductores con licencia mayores de 18 años. En el cuarto trimestrede 1994, se enviaron por correo 100,300 citaciones por jurado aresidentes del condado de Maricopa, Arizona.

Aproximadamente 23,000 de ellos fueron devueltos de la oficina decorreos como imposibles de entregar. Aproximadamente 7,000personas no estaban calificadas para el servicio porque no eranciudadanos, eran menores de 18 años, eran delincuentescondenados o tenían otras razones que los descalificaban paraformar parte de un jurado. Otros 22,000 fueron excusados del serviciode jurado debido a enfermedad, dificultades financieras, serviciomilitar u otra razón aceptable. La muestra final consiste en personasque se presentan para el jurado; algunos jurados sin excusa noaparecen.

Problema 5Muchos académicos y legisladores están interesados enla proporción de personas sin hogar que padecenenfermedades mentales. Wright (1988) estima que el 33%de todas las personas sin hogar están mentalmenteenfermas, mediante una muestra de personas sin hogarque recibieron atención médica de una de las clínicasen el proyecto Health Care for the Homeless (HCH).Argumenta que el sesgo de selección no es un problemagrave porque las clínicas eran de fácil acceso para laspersonas sin hogar y porque los perfiles demográficos delos clientes de HCH estaban cerca de los de la poblacióngeneral de personas sin hogar en cada ciudad de lamuestra. ¿Estás de acuerdo?

Problema 6Aproximadamente 16,500 mujeresrespondieron la Encuesta de MujeresSaludables que apareció en la edición deseptiembre de 1992 de Prevención. Elnúmero de mayo de 1993, que informabasobre la encuesta, afirmaba que "el noventay dos por ciento de nuestros lectorescalificaron su salud como excelente, muybuena o buena".

Problema 7Se realiza una encuesta para encontrar elpeso promedio de las vacas en una región.Una lista de todas las granjas está disponiblepara la región, y 50 granjas se seleccionanal azar. Luego se registra el peso de cadavaca en las 50 granjas seleccionadas.

Problema 8La siguiente carta al editor apareció en el númerodel 10 de diciembre de 1995 del Appleton Post-Crescent: "Paul Harvey, Dios lo bendiga, hacomenzado una encuesta a nivel nacionalrealizada por estaciones de radio independientes através de sus presentadores de programas deentrevistas para determinar el verdaderosentimiento del pueblo estadounidense en relacióncon el envío de tropas a Bosnia. Hasta ahora, losresultados de un extremo de la nación al otropromedian más del 90% en contra ".

Problema 9La edición de junio de 1994 de PC World (en los quioscosde prensa. Mayo de 1994) incluyó un informe sobreconfiabilidad y soporte de servicio para computadoraspersonales (PC). Una de las conclusiones, el 25% de lasPC nuevas tiene problemas ", formó el titular principal dela edición del 23 de mayo de 1994 de USA Today.Cada edición de PC World desde octubre de 1993 habíaincluido un formulario de encuesta que hacía preguntassobre los problemas de hardware de los usuarios Losencuestados de cada mes participaron en un sorteopara ganar una nueva PC y se recibieron más de 45,000respuestas.

Problema 10Se ha demostrado que las mutaciones del genBRCA1 en el cromosoma 17 están asociadas con unmayor riesgo de cáncer de mama y de ovario. Fordy col. (1994) estudiaron los riesgos de cáncer enportadores de mutaciones BRCA1, utilizando unamuestra de 33 familias en América del Norte yEuropa occidental. Las familias fueron seleccionadaspor investigadores que estudian el cáncer de mama.Cada familia en la muestra tenía al menos para laspersonas que habían sido diagnosticadas concáncer de seno u ovario antes de los 60 años.

Problema 10Los investigadores estimaron el riesgo de cáncer deseno y de ovario por la aparición de segundoscánceres en individuos con cáncer de seno yestimaron un "riesgo acumulativo de cáncer demama en portadores genéticos del 87% a los 70años ".Concluyeron: "Este estudio confirma que losportadores del gen BRCA1 tienen un riesgo de porvida de cáncer de mama u ovario cercano al100%, y que los portadores previamente con uncáncer tienen un alto riesgo de desarrollar unsegundo cáncer de mama u ovario y necesitangestionarse en consecuencia "(p. 694).

Problema 10Con base en los altos riesgos calculados deeste análisis y muestras con diseños similares,muchos médicos han recomendado que lasmujeres con antecedentes familiares decáncer de seno se realicen pruebasgenéticas; Algunas mujeres se han sometidoa mastectomías profilácticas después dedescubrir que es probable que tengan elgen.

Problema 10a Responda las preguntas generales sobrela población objetivo, el marco de muestreoy las unidades para esta muestra.

b ¿Proporciona este estudio una estimaciónde la probabilidad de que una mujer quetiene el gen desarrolle cáncer de seno uovario? Explique.