observaciones a los ítemes de las pruebas
TRANSCRIPT
UNIVERSIDAD NACIONAL ABIERTAUNIVERSIDAD NACIONAL ABIERTAVICERRECTORADO ACADÉMICOVICERRECTORADO ACADÉMICOÁREA EDUCACIÓN ÁREA EDUCACIÓN
Profa. Ana Gudiño: EvaluadoraUniversidad Nacional Abierta (UNA)
Caracas, 23 de enero de 2015
Mecanismos de Control de la Evaluación Sumativa en la UNA
Observaciones a ítemes de las pruebas como mecanismo de Metaevaluación
La UNA está organizada para impartir enseñanza en la modalidad de educación a distancia.
Un rasgo particular de esta modalidad es la separación física entre estudiantes y profesores.
El elemento “interacción” juega un papel relevante en el intercambio que debe existir entre los tres componentes básicos en este tipo de modalidad: estudiante, docente y material instruccional.
El sistema de evaluación esta centrado en el estudiante y se desarrolla por cursos, utilizando variados instrumentos de evaluación principalmente las PRUEBAS.
Tancredi y Figueroa (2003)
Observaciones a ítemes de las pruebas
Preámbulo
Las pruebas tienen carácter presencial: son instrumentos de evaluación con un número de ítemes de diferentes tipos, adecuados al nivel de complejidad de cada objetivo del curso, pasan por un control de calidad y deben cumplir con un conjunto de pautas o recomendaciones para su construcción.
El seguimiento y control técnico de los instrumentos es llevado conjuntamente por el Evaluador y el Especialista en Contenido, quienes tienen la responsabilidad de validar la calidad de los mismo.
Se pueden presentar una variedad de elementos una vez que el estudiante tiene acceso a la Clave de Corrección correspondiente a la prueba y manifieste desacuerdo con las repuestas, entre otros.
Preámbulo
En consecuencia, se generan observaciones a las preguntas de las pruebas, en la mayoría de los casos producen un impacto debido a las decisiones que se toman al responderlas.
Las respuestas a las observaciones van dirigidas al estudiante que la remite en los formatos correspondientes.
Estas observaciones se rigen por lo pautado en el documento: Procesamiento de Observaciones Relacionada con la Evaluación Estudiantil, emanado por el Vicerrectorado Académico a través de la Coordinación de la Unidad de Evaluación Académica.
Preámbulo
Arandia (2006)
Observaciones a ítemes de las pruebasEl estudiante tiene la posibilidad por la vía de las
observaciones a los ítemes de las pruebas solicitar aclaratoria de cualquier situación que considere irregular generando la interacción docente-estudiante y evidenciando el carácter bidireccional de la comunicación.
Representan la vía a través del cual el estudiante puede consultar e informar a los Especialistas en Contenidos sus dudas y posiciones en cuanto a una pregunta en específico o más preguntas, en el cual no está de acuerdo.
La observación respecto a cada ítem de prueba u otro documento, es formulada o solicitada por los mismos estudiantes, en el respectivo centro local, en un tiempo máximo permitido por la UNA.
El estudiante debe registrar en el “Formato” correspondiente, la fecha en que hace entrega de su observación al Centro Local o Unidad de Apoyo.
Los estudiantes argumentan una variedad de aspectos relacionados con los ítemes:
a) Fallas en el ítem que impiden responder la alternativa correcta, redacción, omisión de información, error en la información presentada en la base del ítem.
b) Ausencia de la respuesta correcta.c) Más de una opción de la respuesta correcta.d) El ítem no se corresponde con el objetivo.e) Se repiten preguntas en un mismo objetivo.f) El ítem no se se relaciona con el material instruccional.g) Las claves de respuestas liberadas no se corresponden con
las respuestas correctas de la prueba. Entre otros.
Observaciones a ítemes de las pruebas
No. C.E.AUniversidad Nacional Abierta Vicerrectorado AcadémicoCoordinación Evaluación Académica LAPSO 2015-1
Para: Coordinación de Evaluación AcadémicaAsunto: Observaciones a Ítemes de Selección / Claves de Corrección
Centro Local /COD Oficina de Apoyo / COD
Asignatura COD Área
Momento de Evaluación Tipo de Prueba
Fecha de Aplicación
VP
1P 2P 3P 4P 1I 2I OBJ
MIX
No Ítem No. Objetivo Clave Rectificación Propuesta
Argumentos
Nombre del Estudiante Asesor Jefe Unidad Académica o Unidad Logística
CI. CI CIFirma: Firma: Firma:Fecha: Fecha: Fecha: Fecha Recepción Área F. Respuesta No. Memo Área
VP: Versión de la Prueba
Universidad Nacional Abierta Vicerrectorado AcadémicoCoordinación Evaluación Académica LAPSO 2015-1
No. C.E.A
Centro Local /COD Oficina de Apoyo / COD
Asignatura COD ÁreaMomento de Evaluación T. P Fecha de
Aplicación VP1P 2P 3P 4P 1I 2I OBJ
DES MIX
No. Ítem________ No. Objetivo:____________Argumentos:
(Si lo estima necesario anexe Hojas identificadas con su nombre, CI, Centro Local)Nombre del Estudiante
CI.
Asesor
CI
Jefe Unidad Académica o Unidad Logística
CIFirma Firma FirmaFecha: Fecha: Fecha:Fecha de Recepción C.E.A:VP: Versión de la Prueba
Para: Coordinación de Evaluación AcadémicaAsunto: Observaciones a Ítemes de Desarrollo / Modelo Respuesta
Tipos de respuesta emitida por los Especialistas en Contenido
Observaciones Procedentes: Cuando el Especialista en Contenido examina que el planteamiento presentado por el estudiante es correcto y verifica que la opción de respuesta presentada en la clave de corrección no es la correcta. Se modifica la clave de corrección, (se cambia la opción de
respuesta). Se elimina la pregunta, (se reduce el Criterio de Dominio). Se sustituye la clave de corrección, (completa). Se Modifica el Modelo de respuesta. Presentar una explicación didáctica que refuerce la decisión y le
deje una orientación pedagógica y formativa al estudiante. La respuesta con la decisión se presenta en el formato
correspondiente, se remite para todos los Centros Locales.
Asignatura: Cód:Momento de Prueba: Aplicación: Número Versión
PruebaObjetivo(s): Ítem(es):
RESPUESTA
Se modifica la clave de corrección, (se cambia la opción de respuesta).Se elimina la pregunta, (se reduce el Criterio de Dominio).Se sustituye la clave de corrección, (completa).Presentar una explicación didáctica que refuerce la decisión y le deje una orientación pedagógica y formativa al estudiante.
UNIVERSIDAD NACIONAL ABIERTAVICERRECTORADO ACADEMICOCARRERAS EDUCACION INTEGRAL
OBSERVACIÓN PROCEDENTE Nº CEA: 000 Nº NP: ______ PARA: Coordinación de Evaluación Académica
ATENCIÓN: TODOS LOS CENTROS LOCALESDE: Carreras de Educación IntegralASUNTO: Respuesta a ObservaciónFECHA:
Coordinador: _____________________ 29/06/09 Especialista:_______________________ 29/06/09 Evaluador:________________________ 29/06/09 Coordinación Evaluación Académica: __________________ 29/06/09
Tipos de respuesta emitida por los Especialistas en Contenido
Observaciones No Procedentes: Cuando el Especialista en Contenido examina que el planteamiento presentado por el estudiante no procede y considera que la opción de respuesta presentada en la clave de corrección es la correcta.
Se ratifica la opción correcta presentada en la Clave de Corrección.
Presentar una explicación didáctica argumentada que refuerce la decisión y le deje una orientación pedagógica y formativa al estudiante.
Se sugiere al estudiante revisar de nuevo la Unidad y el tema relacionado con el ítem y objetivo.
UNIVERSIDAD NACIONAL ABIERTAVICERRECTORADO ACADEMICOCARRERAS EDUCACION INTEGRAL
OBSERVACIÓN NO PROCEDENTE
PARA: Coordinación de Evaluación AcadémicaATENCIÓN: Centro Local DE: Nivel Central-Carrera: Mención:ASUNTO: Respuesta a ObservaciónFECHA: 00/00/0000
Nº CEA: 000 Nº NP: ______
Asignatura: Cód:
Momento de Prueba: Fecha de Aplicación:
Número Versión Prueba
Objetivo(s): Ítem(es):
RESPUESTASe ratifica la opción correcta presentada en la Clave de Corrección.Presentar una explicación didáctica argumentada que refuerce la decisión y le deje una orientación pedagógica y formativa al estudiante.Se sugiere al estudiante revisar de nuevo la Unidad y el tema relacionado con el ítem y objetivo.
Coordinador: _____________________ 29/06/09 Especialista:_______________________ 29/06/09 Evaluador:________________________ 29/06/09 Coordinación Evaluación Académica: __________________ 29/06/09
Las Observaciones a los instrumentos de pruebas representan un mecanismo de la Metaevaluación; la oportunidad de analizar y revisar los ítemes de los instrumentos, detectar si cumplen con los requisitos y el fin para el cual fueron elaborados y corregir los problemas presentados.
Pueden considerarse un procedimiento de revalidación que implica volver a la revisión del ítem (su estructura, distractores, respuesta correcta, Clave de Corrección, pertinencia con el objetivo, con el material instruccional, la Selección de Lecturas) permitiendo considerar la utilización del mismo a futuro o si deberá ser eliminado del banco de ítemes de la asignatura.
Observaciones a ítemes de las pruebas como mecanismo de Metaevaluación
UNIVERSIDAD NACIONAL ABIERTA VICERRECTORADO ACADÉMICO ÁREA DE EDUCACIÓN
CARRERAS DE EDUCACIÓN INTEGRAL ASIGNATURA:______________ Prof. (a) Especialista en Contenido:__________ LICENCIATURA (CÓDIGO 440) CÓDIGO:____________________________LAPSO:________________Profesor (a) Evaluador (a):_________
TÉCNICO SUPERIOR UNIVERSITARIO (CÓDIGO 430)
REGISTRO DE OBSERVACIÓN A ÍTEMES
LEYENDA:
CEA: COORDINACIÓN EVALUACIÓN ACADÉMICA, RECEP: RECEPCIÓN, 1º I: 1º INTEGRAL, 2º I: 2º INTEGRAL, V1: VERSIÓN 1, V2: VERSIÓN 2, CONT: CONTENIDO DEL ÍTEM S.R.C: SIN RESPUESTA CORRECTA, S.J.: SIN JUSTIFICACIÓN, MÁS R.C.: MÁS DE UNA RESPUESTA CORRECTA, R.N.I: LA RESPUESTANO ES LA INDICADA, MC: SE MODIFICÓ LA CLAVE, EI: SE ELIMINÓ EL ÍTEM, CC: CLAVE CORRECTA, EX: EXTEMPORÁNEO, PROC.: PROCEDENTE, NO PROC.: NO PROCEDENTE, U.E.A.: UNIDAD DE EVALUACIÓN ACADÉMICA, EI: EDUCACIÓN INTEGRAL, O: OBJETIVA, M: MIXTA
Código de la
AsignaturaNº Ítemes Pruebas Integrales
NºÍtemes
S.S.
Nº Ítemes Des.
Total de
Ítemes
Totalpruebas
Asignaturas1I 2I I A IE FEUNA - - - -
V1 V2 V1 V2 - - 1I 2I - - - -120 32 - 32 - - - - - 64 - 64 2423 36 - 36 - - - - - 72 - 72 2476 32 - 32 - - - - - 64 - 64 2477 20 - 20 - - 20 20 20 100 - 100 5
478/430 28 - 28 - - 28 - - 84 - 84 3479 12 - 12 - - - 12 12 48 - 48 4
480/432 28 - 28 - - - - - 56 - 56 2481/436 24 - 24 - - - 24 24 56 - 56 4
484 40 - 40 - - - - - 80 - 80 2485/418 16 - 16 - - 16 16 16 64 - 64 5
487 24 - 24 - - - - - 48 - 48 2488/422 24 - 24 - - 24 - - 72 - 72 3489/424 24 - 24 - - 24 - - 72 - 72 3
490 22 - 22 - - - - - 32 12 44 2491/459 36 - 36 - - - - - 72 - 72 2492/438 20 - 20 - - - - - 40 - 40 2
493 8 - 8 - - - - - 16 - 16 2498 16 - 16 - - - - - 32 - 32 2
TOTAL DE ÍTEMES
418 - 418 - 112 72 72 1080 12 1092 49
Para las pruebas de las asignaturas de la Carrera del TSU en Educación Integral (430) lapso 2008 – 2 se elaboraron un total de 1092 ítemes de los cuales 1080 son de selección simple y 12 son ítemes de desarrollo distribuidos en un total de 49 pruebas.
Nº DE ÍTEMES PRODUCIDOS PARA LAS PRUEBAS DE LAS ASIGNATURAS DE LA CARRERA DE TSU (430) Y TOTAL DE PRUEBAS ELABORADAS DURANTE EL LAPSO 2008 – 2
CÓD. ASIGNATURAS OBSERVACIONES
PROCEDENTES OBSERVACIONES
NO PROCEDENTES
1º IN 2º IN TOTALESTOTAL OB
P 1º IN 2º INTOTAL OB
NO PTOTAL
OBSEI MC EI MC EI MC CC CC
120 LENGUA Y COMUNICACIÓN EN EDUCACIÓN - - - - - - - - - - -423 DISEÑO Y ELABORACIÓN DE PUBLICACIONES
PERIÓDICAS - - - 1 - 1 1 - - - 1476 MATEMÁTICA 1 - - - 1 - 1 - - - 1477 FUNDAMENTOS DE LA EDUCACIÓN - - - - - - - 1 - 1 1
478/430
LECTO-ESCRITURA- - 1 3 1 3 4 - 1 1 5
479 ENSEÑANZA DE LA MATEMÁTICA - - - 1 - 1 1 - - - 1480 EDUCACIÓN AMBIENTAL - - - - - - - 4 - 4 4481 LITERATURA INFANTIL Y JUVENIL - 1 - 3 - 4 4 - - - 4484 GEOGRAFÍA GENERAL Y DE VENEZUELA - - - - - - - - - - -485 CIENCIAS NATURALES I - - - - - - - 2 3 5 5487 DIDÁCTICA PARA EL DOCENTE INTEGRADOR - - - - - - - 1 - 1 1488 HISTORIA DE VENEZUELA - - - - - - - - - - -489 CIENCIAS NATURALES II 1 3 1 - 2 3 5 2 1 3 8490 COMUNICACIÓN EFICAZ - - - - - - - - - - -491 ENSEÑANZA DE LA LENGUA - - 1 - 1 - 1 2 3 5 6492 SEMINARIO PRACTICO DE EDUCACIÓN PARA
EL TRABAJO - - - - - - - - - - -493 EVALUACIÓN - - - - - - - 1 - 1 1498 LIDERAZGO UNA ESTRATEGIA PARA EL
CAMBIO - - - 1 - 1 1 - - - 1
2 4 3 9 5 13 18 13 8 21 39
- - - - 0,45%1,19% 1,64% 1,19% 0,74 1,93% 3,57
RELACIÓN DE RESPUESTAS DADAS A LAS OBSERVACIONES A ÍTEMES DE PRUEBAS POR ASIGNATURAS CARRERA 430 LAPSO 2008 – 2
DE 49 PRUEBAS ELABORADASEL TOTAL DE ÍTEMS CONSTRUIDOS ES DE 1.092 = 100,00% EL TOTAL DE ÍTEMES CON OBSERVACIONES 39 = 3,57%EL TOTAL DE ÍTEMES SIN OBSERVACIONES 1.080 = 98,90%
“El error esta estrechamente vinculado a uno de los espacios didácticos del ámbito educativo, la evaluación(...) una de las finalidades de la evaluación es la revalidación, la cual se denomina evaluación formativa. El error aparece entonces como una referencia una investigación para aplicar la metaevaluación (...) El error siempre tiene una explicación y un porqué”.
De la Torre (2004)
Las observaciones que realizan los estudiantes a los ítemes de las pruebas representan la oportunidad de evaluar sus planteamientos y aprendizajes formativamente y también nuestro trabajo como docente; más que resaltar un error de las partes involucradas, es la oportunidad de mejorar el proceso, a través de los ítemes de las pruebas, las pruebas, la misma observación planteada, con la validación pertinente. Profa. Ana Gudiño.
Tancredi, B., Figueroa, P. (2003). Seminario N° 1: Análisis de las características del alumno de educación a distancia: Caso Universidad Nacional Abierta. Red de Universidades de Educación a Distancia Rueda PROGRAMA ALFA, Subprograma A. PROYECTO: Evaluación de los Programas de Educación a Distancia. Loja, Ecuador.
Arandia, J.R. (2006). Procesamiento de Observaciones relacionada con la evaluación estudiantil. Vicerrectorado Académico. Coordinación de Evaluación Académica. UNA. Lapso 2006 – 2.
De la Torre, S. (2004) Aprender de los errores. El tratamiento didáctico de los errores como estrategias innovadoras. Editorial: Magisterio del Rio de la Plata. Buenos Aires. Argentina.
Referencias: