Transcript Slide 1
Evaluación del aprendizaje a través de exámenes comprensivos en la educación en línea y a distancia. Dra. Katherina E. Gallardo Córdova Escuela de Graduados en Educación Definición • La evaluación del aprendizaje es el proceso por el cual se obtiene información para: • Determinar alcances obtenidos con respecto a objetivos de aprendizaje • Tomar decisiones sobre mejoras que se deben realizar a nivel • Curso / recursos • Prácticas docentes • Instrumentos de evaluación Tipos, formas y medios para evaluar • Tipos: diagnóstica, formativa, sumativa • Formas: exámenes cerrados y abiertos, productos escritos, organizadores de información, registros de desempeño. • Medios: escritos u orales • Aplicaciones: automáticos o manuales Evaluación en la educación a distancia Limitantes: • Tecnológicas ¿sabrá manejar apropiadamente la herramienta? • Identidad ¿quién realizó el trabajo o presentó el examen? • Uso de recursos ¿habrá dado créditos a los autores debidamente? • Desempeño ¿habrá desarrollado realmente las habilidades que se promovieron a través del curso? Evaluación en la educación a distancia Tendencias: • Programas computacionales más sofisticados que permiten: • Exámenes • • Inclusión de reactivos con grabación de procedimientos (ciencias, química, estadística). Inclusión del elemento «voz» para registrar respuestas de los examinados. • Trabajos escritos • Seguimiento de avance en comparación con los objetivos (rúbricas electrónicas). Examen 1. ¿Cómo evaluamos en nuestros cursos en línea y a distancia? 2. ¿Por qué optamos por trabajos escritos en lugar de exámenes y viceversa? 3. ¿Qué determina que un examen esté bien hecho? Una experiencia con un examen comprensivo Materia: ED5048 Evaluación del aprendizaje DOMINIOS DEL NIVELES DE PROCESAMIENTO CONOCIMIENTO a. Informació n b. Proced. Mentales A.1 Vocabulari o B.1. Reglas simples A.2 Hechos B.2 Algoritmos A.3. Sec. Eventos B.3 Tácticas A.4. Generaliza ciones B.4 Macro procedim. Nivel 2: Comprensión 1.1. reconocimient o 2.1. integración 3.1. asociación 4.1. Toma de decisiones 1.2 recuerdo/ejec ución 2.2 simbolización 3.2. clasificación 4.2. Resolución de problemas 3.3. Análisis de error 3.4. Generalizaci ón 4.3. Experimentaci ón 4.4. Investigación 3.5. Especificació n A.5. Principios Objetivos específicos Nivel 3:Análisis Nivel 4: Utilización conocimiento Nivel 1: Recuperación D/F/S Temas a cubrir Instrume nto Peso Módulo 1 Al finalizar el módulo 1 los alumnos serán capaces de: 1. Comprender aspectos teóricos fundamentales sobre la evaluación del aprendizaje. 2. Aplicar la Nueva Taxonomía con fines de planeación, diseño y valoración de 1. El campo semántico de la evaluación. 2. Los retos de la evaluación para la educación del siglo XXI. 3. La Nueva Taxonomía de Marzano y Kendall (1era y 2da parte) A.3. 2.1. B.2. F 3.2. F Mapa mental Examen comprensi ón lectura 5% 5% Material revisado en el módulo 1 1. Castillo, S. (2002). Compromisos de la Evaluación educativa. 2. Méndez, J.M. (2001). Evaluar para conocer, examinar para excluir. 3. Padilla, R.A. (2009). Exámenes masivos internacionales y nacionales 4. Vidal, R. (2009). ¿Enlace, Exani, Excale o PISA? 5. Wolff, L. (2006). Los costos de las evaluaciones de aprendizaje en América Latina. 156 páginas a leer para la semana cuatro = 4.3 páginas por hora tomando como referencia las 36 horas de estudio que corren de la semana 2 a la 4. Respuestas para el caso a compartir 1. ¿Cómo evalúo en el curso de evaluación? Aplicación de diferentes estrategias que permiten corroborar cómo los alumnos van alcanzando los objetivos de aprendizaje Respuestas para el caso a compartir 2. Para el primer objetivo, ¿por qué opté por un organizador de información y luego por un examen? Dependió de su relación con el siguiente objetivo: • Apropiación de los contenidos • Precisión en el manejo de los contenidos Respuestas para el caso a compartir 3. ¿Qué determinó que el examen estuviera bien hecho? • Enfocarse en el nivel taxonómico (comprensión) • Elaborar un banco de reactivos para obtener preguntas al azar • Abarcar materiales revisados • Construir reactivos (preguntas) de opción múltiple según indica la técnica • Práctica 10% Ejemplos reactivos 1. Base de la pregunta Según Álvarez Méndez (2002), una de las ventajas de un proceso de evaluación del aprendizaje, llevado de manera adecuada, es que: a. Opción correcta El aprendizaje se vuelve parte del proceso de evaluación. Cada momento de evaluación es un marco en el que el aprendizaje se da y se consolida. b. Distractor 1 El pensamiento crítico, sin duda, emerge. La evaluación en sí misma contiene elementos que hace que este tipo de pensamiento despierte. c. Distractor 2 El aspecto sancionador de la evaluación se lleva a cabo de manera justificada y emite una serie de juicios que elevan las posibilidades de éxito futuro. d. Distractor 3 La división de alumnos de alto rendimiento y bajo rendimiento es confiable. Se puede realmente saber quiénes han tenido éxito. Justificación 1 La evaluación es parte integral del pensamiento crítico pero no al revés. El pensamiento crítico la requiere para seguirse formando. Justificación 2 La evaluación del aprendizaje que se conciba en sí misma formativa está lejos de ser sancionadora. Justificación 3 Si la evaluación está bien conducida, no se debería experimentar casos de fracaso, pues la evaluación siempre dará oportunidad para detectar cualquier tipo de falla y que ésta se convierta en definitiva. Ubicación en la Nueva Taxonomía de Marzano y Kendall. A.2./ 2.1. = Hechos / Integración 9. Base de la pregunta a. Opción correcta Una de las conclusiones que se pueden obtener, a partir de la lectura sobre el costo de evaluación en América Latina (Wolf, 2007), es que el proceso de evaluación: Sostiene un costo relativamente bajo comparado con otras iniciativas que se plantean para coadyuvar a elevar la calidad del aprendizaje. b. Distractor 1 Es incompleto, por lo tanto no es posible sacarle provecho a los datos que se obtienen sobre los resultados de los exámenes censales y muestrales. c. Distractor 2 Es imposible pensar en la aplicación de exámenes muestrales para todos los países. Hay países pobres, de un bajo PBI, que no podrían sostenerlo. d. Distractor 3 Demanda una serie de recursos materiales y humanos que son difíciles de cubrir por la mayoría de países. Por tanto, es una práctica que debe dejarse de lado para dar pie a otras con mayor futuro. Justificación 1 Los procesos de evaluación se llevan hasta el análisis y, en algunos casos, a la toma de decisiones. Esto nos llevaría a hablar de una finalización del ciclo o proceso. No obstante, lo que no está completo en algunos casos son los costos o inversión para estas iniciativas (por ejemplo, caso de Colombia). Justificación 2 Lo que es imposible pensar para algunos países de bajos recursos son los exámenes censales. Los exámenes muestrales sí son una buena opción para estos. Justificación 3 Los análisis de costo-beneficio del artículo dicen lo contrario a esta afirmación. Sin duda, invertir en evaluación debería ser una práctica más socorrida por el bajo costo y el alto impacto que los análisis, bien llevados, pueden generar como soluciones a los diferentes ámbitos educativos. Ubicación en la Nueva Taxonomía de Marzano y Kendall. A.4/2.1. Generalizaciones / Integración Resultados del examen Resultados calificaciones Resultados calificaciones 100 88 90 80 70 60 50 Frecuencias 39 40 39 37 30 20 12 10 4 6 5 1 0 oct-19 0-9 0 90 - 100 80 - 89 70 - 79 60 - 69 50 - 59 40 - 49 30 - 39 20 - 29 Mensajes recibidos Mensaje recibidos Hola Dra. Me atrevo a escribirle, ya que de acuerdo a lo que he aprendido en las lecturas sobre evaluación, ésta es una forma de obtener información del proceso de enseñanza. Tuve la inquietud de escribirle, posterior a realizar el examen de comprensión de lectura, el cual realicé de la manera más honesta, empleando sólo mis apuntes que tomé de las lecturas. Resultando que lo reprobé. Situación que me agobió, porque esto me deja lejos de obtener un buen promedio en la materia (y a penas estamos empezando), pero sobre todo, porque las lecturas ME ENCANTARON, en realidad he aprendido mucho sobre ellas. Sí, reprobé el examen, pero me han dejado MUCHO para mi labor docente, incluso he empezado a "tomar cartas en el asunto" sobre mi manera de evaluar. Mensajes recibidos (inconformidad) «Aunque es evidente que mi nota no es para nada satisfactoria, lo que más me preocupa es el planteamiento tan inapropiado de los ítemes, redacción confusa, tendencia a la memoria, falta de explicación de respuesta de los ítemes al finalizar la prueba, en fín, indignación general. Creo que este curso tiene bases muy interesantes a nivel de evaluación como para terminar haciendo una prueba de un nivel sumamente malo por su construcción y planteamiento» Alumno: respondió el examen de comprensión en 12 minutos Ideas de cierre para reflexionar. 1. ¿Qué significa evaluar para cada uno de nosotros? 2. ¿Cómo estamos evaluando el aprendizaje en nuestros cursos? 3. ¿Qué relación guarda el cómo evalúo con la calidad académica que estamos buscando en U.V.? 4. ¿Qué innovaciones puedo implementar yo, como profesor titular o tutor para mejorar los actuales mecanismos de evaluación? 5. ¿Qué tipo de apoyos tecnológicos y de capacitación requerimos? Fuentes recomendadas: Baumann, M., Steinmetzer, J., Karami, M., & Schäfer, G.. (2009). Innovative electronic exams with voice in- and output questions in medical terminology on a high taxonomic level. Medical Teacher, 31(10), E460. Retrieved October 10, 2010, from Academic Research Library. (Document ID: 1880516481). Díaz Barriga, A. (2000). Estudio preliminar: El examen: Un problema de historia y sociedad. En A. Díaz Barriga, A. (Compil.), El examen: Textos para su historia y debate (pp. 11–28). Distrito Federal, México: Centro de Estudios sobre la Universidad (CESU), Plaza y Valdés y UNAM. Marzano, R. J. y Kendall, J.S. (2008). Designing and assessing educational objectives: Applying the new taxonomy. California, EE.UU.: Corwnin Press. Marzano, R.J, Pickering, D.J. y Pollock, J.E. (2001). Classroom instruction that works: Research-based strategies for increasing student achievement . Alexandría, Virginia: Association for Supervision and Curriculum Development. Thorndike, R. L. y Hagen, E. P. (1989). Medición y evaluación en psicología y educación (2a. ed.). Distrito Federal, México: Trillas. Dra. Katherina E. Gallardo Córdova [email protected]