Transcript Evaluacion

Evaluación
Veracruz, Ver., febrero 2009
Índice
• Evaluación tradicional
• Evaluación estandarizada
• Preguntas cerradas y abiertas
• Rúbricas
• Bibliografía
Evaluación tradicional: sus
inconvenientes
• Cada profesor califica con su propio criterio
• Dificultad vs. Habilidad
Evaluación subjetiva: más
inconvenientes
• Cálculo de promedios por carrera
• ¿Qué significa obtener promedio de 8?
Evaluación objetiva: un intento
• Calificación por curva
6
7
8
9
10
10
10
• ¿Qué significa obtener promedio de 8?
Evaluación ideal
• El modelo de evidencias vincula los datos
de la tarea con las variables planteadas
en el Perfil.
• Identifica y caracteriza las principales
características del producto de la acción y
las transforma en evidencias observables
y cuantificables.
Pruebas estandarizadas
• Son exámenes objetivos para medir el
aprendizaje
• Aprendizaje es cambio en comportamiento
mental: duradero y producto de la experiencia
• Comportamiento mental se clasifica en 3
dominios: cognitivo, afectivo y psicomotor
• Dominio cognitivo: conocimientos, destrezas y
habilidades
Dominio cognitivo
• Conocimientos: contenido de los cursos que se
memoriza y se entiende.
• Destrezas: un conjunto seriado de
comportamientos que llevan a un resultado.
• Conocimientos y destrezas: se adquieren
durante periodos cortos.
• Habilidades: son destrezas más complejas,
adquiridas a lo largo de más tiempo.
Ejemplos
Literatura:
Conocimiento: reglas de ortografía.
Destreza: escribir frases sintácticamente correctas en voz
activa.
Habilidad: escribir narrativa.
Biología:
Conocimiento: características de los fósiles del Cámbrico.
Destreza: clasificar trilobites y amonites por subespecie.
Habilidad: reconstruir fósiles incompletos.
Cómo medir aprendizaje
El aprendizaje en el dominio cognitivo se mide con
reactivos.
Un reactivo es una instrucción o pregunta que
requiere de una respuesta por parte del examinado y
de una regla de calificación por parte del evaluador.
La respuesta puede ser escogida o construida.
Un reactivo de respuesta escogida es un
reactivo de opción múltiple o cerrado.
Un reactivo de respuesta construida o abierto
puede ser un ensayo, reporte, proyecto, artículo
de investigación, etc.
Tipos de reactivos
Reactivos cerrados
Se utilizan cuando la respuesta correcta es única y el
examinado la escoge a partir de una serie de
opciones dadas.
Reactivos abiertos
Se utilizan cuando el examinado construye la
respuesta individualmente.
Calificados con Checklist o correcto/incorrecto,
cuando lo que se califica tiene muchas respuestas
correctas.
Calificados con rúbrica, cuando lo que se califica es
conocimiento complejo.
Los reactivos se refieren a dos dimensiones:
Contenido y Conducta Cognitiva
Conducta Cognitiva
Contenido
Conducta necesaria para dar respuesta al reactivo
Sobre qué trata el
reactivo.
Reactivos
El Contenido puede ser de 4 tipos:
Conducta Cognitiva
Contenido
Hechos
Conceptos
Principios
Procedimientos
Los Hechos son conocimiento básico indiscutible.
Los Conceptos pueden ser abstractos (claridad, originalidad, eficacia) y
concretos (costo, volumen, peso, distancia).
Los Principios pueden ser causa-efecto, axiomas, leyes de probabilidad, etc.
Los Procedimientos pueden ser simples (destrezas) o complejos (habilidades).
En general son tangibles, secuenciales y observables.
La Conducta Cognitiva puede ser:
Conducta Cognitiva
Entendimiento
Solución de
problemas
Pensamiento
crítico
Creatividad
Contenido
Memorización
Memorización se refiere a recordar conocimiento declarativo.
Entendimiento se refiere a la comprensión del contenido: hechos, conceptos,
principios y procedimientos.
Solución de problemas implica una combinación de pasos físicos y mentales
para llegar a una solución.
Pensamiento crítico implica evaluación, predicción y pensamiento deductivo e
inductivo.
Creatividad implica pensamiento creativo y producción creativa.
Conducta Cognitiva vs. Dominio Cognitivo:
Conducta Cognitiva
Memorización
Entendimiento
Solución de
problemas
Pensamiento
crítico
Pensamiento
creativo
Contenido
Hechos
Conceptos
Conocimientos
Principios
Procedimientos
Destrezas
y
Habilidades
El aprendizaje de conocimientos, destrezas y habilidades se puede medir con
reactivos, ya sea de respuesta escogida o de respuesta construida.
Verbos utilizados según conducta cognitiva:
Conducta Cognitiva
Memorización
Contenido
Hechos
Conceptos
Principios
Procedimientos
Identifique,
nombre,
recuerde,
seleccione.
Entendimiento
Solución de
problemas
Pensamiento
crítico
Creatividad
Anticipe,
estime, critique,
Defina, demuestre,
analice,
describa,
Conteste, calcule,
clasifique,
encuentre,
concluya,
Construya, cree,
compare,
ejemplifique,
determine,
diseñe, invente,
contraste,
ilustre, liste,
encuentre,
planee, escriba.
defienda,
muestre, ofrezca, resuelva, localice.
juzgue,
mencione.
relacione,
valore.
Ejemplos de reactivos que requieren
distintas conductas cognitivas
Conducta Cognitiva
Memorización
Entendimiento
Solución de
problemas
Describa a qué
se debe que
existan
diferentes
estaciones
durante el año.
Suponga que el
ángulo entre el
eje de rotación
de la Tierra y su
plano de
traslación es de
25º. Calcule a
qué latitud
estaría el
Trópico de
Cancer.
Contenido
Hechos
Conceptos
Principios
Procedimientos
Recuerde cuál
es el ángulo
entre el eje de
rotación de la
Tierra y el plano
de traslación
alrededor del
Sol.
Pensamiento
crítico
Creatividad
Estime qué
sucedería si el
Diseñe un
ángulo entre el
experimento
eje de rotación
para explicar el
de la Tierra y el
fenómeno de
plano de
"Sol de
traslación
Medianoche".
alrededor del
Sol fuera de 90º.
Los reactivos cerrados o de opción
múltiples son ideales para medir:
Conducta Cognitiva
Memorización
Entendimiento
Solución de
problemas
Pensamiento
crítico
Pensamiento
creativo
Contenido
Hechos
Conceptos
Principios
Procedimientos
Memorización del contenido: conocimiento declarativo.
Entendimiento del contenido: de los hechos, de los conceptos, de los
principios y de los procedimientos.
No son adecuados para medir pensamiento complejo.
Los multireactivos de opción múltiple
pueden ser usados para medir:
Conducta Cognitiva
Memorización
Entendimiento
Solución de
problemas
Pensamiento
crítico
Pensamiento
creativo
Contenido
Hechos
Conceptos
Principios
Procedimientos
Destrezas y habilidades mentales, cuando existe una única respuesta
correcta.
En este caso se hace uso de conjuntos de reactivos de opción múltiple
ligados a un mismo texto inicial que funciona como estímulo común.
Los reactivos abiertos son ideales para
medir:
Conducta Cognitiva
Memorización
Entendimiento
Solución de
problemas
Pensamiento
crítico
Pensamiento
creativo
Contenido
Hechos
Conceptos
Principios
Procedimientos
El pensamiento complejo se mide únicamente con reactivos abiertos.
Ventajas de los reactivos de
opción múltiple
Cobertura del dominio. Permiten cubrir el contenido del dominio utilizando
muchas preguntas que el examinado contesta en poco tiempo. Esto no es
fácil de lograr con ensayos.
Confiabilidad. La consistencia de los resultados de los examinados en el
tiempo son una medida de la confiabilidad de una prueba. El error de
medida de una prueba de opción múltiple es una variable fácilmente
controlable.
Eficiencia. Los reactivos son reutilizables. El costo de calificarlos es mucho
menor que el costo de calificar ensayos.
Objetividad. Permiten comparar el desempeño de distintas poblaciones en
distintas circunstancias y a distintos tiempos.
Calificación automática. Es un proceso de fácil automatización.
Desventajas de los reactivos de
opción múltiple
Trivialización. Puede dar lugar a que se enseñe y se examine lo trivial.
No se deben limitar a examinar memorización de contenido.
Inapropiados para medir pensamiento complejo. Habilidades de
escritura o de pensamiento crítico no pueden ser medidas con OM.
El examinado no escribe nada durante la prueba. Es aconsejable
mezclar OM con ensayos.
Multirreactivos:
Son conjuntos de reactivos de opción múltiple convencionales, agrupados
alrededor de un único estímulo.
Son útiles para medir entendimiento, solución de problemas y pensamiento
crítico. Se debe tener cuidado que la respuesta de cada reactivo dentro del
multireactivo no dependa de la respuesta de otro.
Lea con cuidado el siguiente texto y conteste las preguntas 1 y 2:
Una revolución del Cámbrico fue sin duda la aparición de esqueletos,
quizás motivada por los cambios en la química de los océanos (los
continentes estaban en posición ecuatorial, con climas muy cálidos y
fácil precipitación de carbonatos, por lo que el gasto metabólico era
menor). También la aparición de nuevos predadores …
1. Identifique …
2. Estime …
A.
A.
B.
B.
C.
C.
Multirreactivo de
Comprensión:
Se utilizan para medir comprensión
de lectura. El ejemplo mide, con 8
preguntas, si es posible identificar:
1. idea principal.
2. características de personaje
principal.
3. un conflicto o problema.
4. un detalle importante en el
significado de la historia.
5. una secuencia de eventos.
6. una relación causal.
7. el final de la historia.
8. el pasado de la historia.
Multirreactivo
Pictórico:
Ideal para medir habilidades
de alta inferencia que
involucren entendimiento y
pensamiento crítico
utilizando gráficas,
fotografías o cualquier otro
material visual.
Multireactivo de
solución de
problemas:
Es una de las mejores
maneras de medir destrezas
y habilidades en la solución
de problemas, en lugar de
utilizar un formato de
ejecución.
Reactivos para medir aprendizaje
complejo
Reactivos abiertos
Se utilizan para medir entendimiento, solución de problemas,
pensamiento crítico y creatividad.
Se califican con Checklist o correcto/incorrecto, cuando el resultado
tiene muchas respuestas correctas
Se califican con rúbrica, cuando el resultado no es tangible
Distintos tipos de reactivos abiertos
• Demostración
• Ensayo
• Examen Oral
• Reseña/Crítica
• Experimento
• Examen de ejecución
• Proyecto
• Reporte de investigación
Reactivo abierto: Demostración
Este tipo de reactivo se utiliza cuando se requiere que el examinado
demuestre una habilidad o destreza física.
Demuestre usted cómo se prepara a un paciente para
colocarle un catéter.
Se puede calificar con:
checklist si los pasos intermedios para llegar a la solución son únicos. En
este caso el checklist consiste de una lista de los pasos más importantes
para llevar a cabo la tarea.
rúbrica si lo que se califica no es tangible, como eficiencia, dominio,
atención al paciente, etc. En este caso, la rúbrica describe el estándar y las
desviaciones de éste.
Reactivo abierto: Ensayo
Este tipo de reactivo se utiliza cuando se requiere que el examinado
argumente de manera razonada su posición o punto de vista acerca de
alguna controversia.
Defienda su argumento a favor o en contra de la economía
de libre mercado.
Históricamente es el reactivo abierto más usado: surge de manera natural
la costumbre de hacer una pregunta y esperar que el examinado la
conteste por escrito para calificarla. Dado que este método de calificación
es costoso, fue que surgieron las preguntas de opción múltiple.
Se puede calificar con checklist o rúbrica.
Reactivo abierto: Examen oral
Este tipo de reactivo es muy popular en el salón de clases, aunque también
se utiliza en exámenes de certificación de profesiones y dominio de idiomas.
Describa usted qué dice la reglamentación acerca del
desecho de material biológico en hospitales públicos.
Se puede calificar con:
checklist si los pasos intermedios para llegar a la solución son únicos,
rúbrica si lo que se califica requiere de pensamiento crítico o creatividad.
Reactivo abierto: Reseña/Crítica
Este tipo de reactivo se utiliza para evaluar pensamiento crítico. Una
manera efectiva de medirlo es pidiendo al examinado que reseñe o critique
un evento, acción, política, representación.
Reseñe usted la tendencia de los trabajos presentados en el
último Congreso Nacional.
Se puede calificar con una rúbrica enfocada a evaluar el pensamiento crítico
y la habilidad de expresarlo.
Reactivo abierto: Experimento
Este tipo de reactivo requiere que el alumno prepare y lleve a cabo un
experimento, registrando todas sus observaciones.
En un cuarto cerrado con los vidrios empañados, haga el
experimento de tratar de quitar el vapor con aire caliente.
Reporte el resultado y conclusiones.
En general se puede calificar con checklist ya que el experimento implica
pasos intermedios únicos para llegar al resultado.
Reactivo abierto: Observación apoyada en
instrumentos
Este tipo de reactivo se utiliza cuando el resultado esperado es medido
cuantitativamente: tiempo, peso, longitud, volumen, área, color. Es muy
usado en clases de ciencia.
Utilizando un teodolito, determine usted cuál es la diferencia
en altura entre el borde sur del río y el borde norte.
Dado que el resultado está definido de manera precisa, se puede calificar
con checklist o simplemente con éxito/fracaso.
Reactivo abierto: Examen de ejecución
Este tipo de reactivo es muy popular en artes escénicas: música
instrumental, teatro, canto, actuación. También se utiliza para certificación
profesional.
Ejecute usted el primer movimiento del Concierto No. 1 de
Beethoven.
Realice la extracción del molar en el paciente.
En general, este tipo de examen se califica con rúbrica, ya que se mide la
competencia en varias escalas, como son estilo, dominio, seguridad,
soltura, improvisación, etc.
Reactivo abierto: Proyecto
Este tipo de reactivo se ha convertido en el pilar de la enseñanza moderna
en el salón de clases.
Diseñe y construya un robot autónomo guiado por un rayo
laser.
Ofrecen la oportunidad de que el alumno haga gran cantidad de trabajo
individual y colectivo, muestre sus conocimientos y experimente caminos
nuevos, evidenciando creatividad.
Su calificación se debe hacer con rúbricas, que definan los estándares
mínimos requeridos para acreditar la tarea.
Reactivo abierto: Reporte de investigación
Este tipo de reactivo complementa al proyecto y se ha convertido en el pilar
de la enseñanza a nivel universitario. Inclusive, es el método más común
para medir originalidad y creatividad en las ciencias básicas.
Elabore el reporte de investigación del proyecto “Robot
autónomo guiado por un rayo laser”.
Su calificación es muy compleja, ya que debe comprender muchos ejes,
como son: conocimiento, dominio del tema, dominio del idioma, estado del
arte, presentación de resultados, factibilidad, método, etc. Se debe utilizar
una rúbrica.
Calificación de reactivos abiertos
Para otorgar una puntuación a quien presenta un reactivo abierto, es
necesario utilizar guías impresas que le describan al examinador cuáles son
las evidencias que debe buscar para confirmar que el examinado ha
efectivamente aprendido.
Esto se puede hacer con:
•
•
checklists, si lo que se busca es únicamente confirmar que se ha
cumplido con una serie de pasos, o con
rúbricas si es necesario confirmar que se ha adquirido conocimiento
complejo.
Check-list: es una lista de tareas que el
examinado debe cumplir
Si
El alumno muestra conocimiento sobre el tema
Las ideas y conceptos de la presentación son fáciles de
entender.
El alumno utiliza ejemplos claros, muestra evidencias y/o se
apoya con material gráfico.
El alumno hace uso de lenguaje apropiado para el tipo de
presentación.
Los gestos y el lenguaje corporal son adecuados.
Mantiene contacto visual con el público todo el tiempo.
El alumno articula claramente.
No
Rúbrica:
Es una guía que se utiliza para otorgar una puntuación a quien
presenta un reactivo abierto de aprendizaje complejo.
Contiene criterios preestablecidos que permiten determinar niveles de
ejecución de diferente calidad: es una escala graduada.
Hace referencia a la calidad de las respuestas esperadas con
relación al uso de destrezas o la aplicación de conceptos
desarrollados.
Contiene descriptores que definen qué observar a cada nivel de
ejecución.
Las rúbricas pueden ser Globales o Analíticas.
Rúbricas globales:
Se utiliza cuando se toleran errores en el proceso, siempre que
el resultado final sea de alta calidad.
Al examinado se le presenta un problema complejo.
La respuesta correcta no es única.
El sinodal evalúa la totalidad del proceso o producto sin juzgar
por separado las partes que lo componen.
Ventaja: el proceso de evaluación es rápido.
Evaluación global
Excelente
Muy Bueno
Suficiente
Mínimamente Competente
El examinado presenta un
El examinado comprende
El estudiante cumple con las
El examinado tiene
claro entendimiento de la
claramente cuál es la
expectativas del curso.
conocimiento sobre el tema,
competencia. Todas sus
competencia. Interés y
Demuestra tener nuevo
pero a un nivel de
trabajos, proyectos, reportes,
entusiasmo lo llevan una
conocimiento al dar
competencia mínimo. Las
tareas fueron completados a
investigación que sobrepasa
presentaciones orales y
tareas, notas, reportes,
tiempo, están
lo requerido. Sus trabajos
entregar reportes escritos. Su
pruebas están
extremadamente bien
están bien organizados y
trabajo está bien organizado y ocasionalmente incompletas y
organizados y todas las
completos, cumplen con los
completo. Entiende las
podrían organizarse mejor.
respuestas son acertadas. Su
requisitos mínimos
taresas que se le dejan.
Ha utilizado algunas fuentes
gran interés y motivación lo
esperados.Todas sus notas,
Utiliza todos los recursos que
de información pero no es
han llevado a cubrir más allá
tareas, pruebas, reportes de
se le requieren y organiza
claro qué entendió. Incluyó
de los requisitos básicos. El
laboratorio los termina a
bien la información en sus
información que no es
estudiante ha leído material
tiempo, están muy bien
notas, tareas, pruebas,
relevante para el tema. El
relacionado y ha consultado
organizados y las preguntas
reportes de laboratorio y
estudiante hace lo que se
muchas fuentes de
las contesta acertadamente.
debates. Todos sus trabajos
requiere, pero nada más.
información para sus reportes Ha utilizado más recursos que
cubren el mínimo de los
Parte del trabajo no ha sido
y experimentos. El estudiante
los requeridos y demuestra
requisitos y las expectativas.
terminado. Las tareas no
utiliza lo que ha aprendido
nuevo conocimiento en
Cumplen los estándares de
están terminadas con cuidado
cuando participa en
trabajos escritos y orales que
desempeño entre el 70 y
y no utiliza la información de
discusiones orales, tareas y
utiliza en sus tareas y en sus
79%.
recursos adicionales. Todos
trabajo escrito. El estudiante
presentaciones orales. El
sus trabajos equivalen a un
establece conexiones entre el
nuevo conocimiento es
estándar de desempeño entre
salón de clase y el laboratorio.
evidente cuando establece
el 60 y 69%.
Sus notas, pruebas, reportes conexiones entre la clase y el
de laboratorio, debates, y
trabajo de laboratorio. Sus
tareas son del más alto nivel
notas, pruebas, reportes de
de desempeño, por arriba del
laboratorio, debates, tareas,
90%.
están claramente
organizadas, hechas con
cuidado, y en general
sobrepasan las expectativas
del maestro. Todas están por
arriba del nivel estándar de
No Acreditado
El examinado no muestra que
tenga conocimiento sobre el
tema. Sus tareas, trabajos,
reportes, pruebas, carecen de
evidencia de que el estudiante
haya aprendido. El trabajo no
cumple con los requisitos
solicitados. Hay secciones
que faltan. La participación
del examinado es debil y en
ocasiones no participó. Todos
los trabajos están pobremente
hechos y caen muy por
debajo de los estándares
previstos. DE manera global,
el estudiante no ha captado
los nuevos conceptos de la
competencia. El nivel de
desempeño está por ddebajo
del 60%.
Rúbrica analítica:
Se utiliza cuando se requiere de detalle en la evaluación.
El alumno obtiene varias puntuaciones, que se utilizan para
calcular numéricamente un puntaje final.
El proceso de evaluación es más lento.
Ventajas:
Permite crear un perfil de fuerzas y debilidades y ofrecer
retroalimentación al examinado.
Permite hacer la evaluación referida al criterio.
Evaluación de un proyecto
Excelente
Muy Bueno
3
2
Mínimamente
Competente
1
1. Escogió una
representación que ayuda
1. Entendimiento a entender el problema.
del Concepto:
Interpretación del
2. Utilizó información
problema, uso de
aparentemente oculta.
representaciones y
procedimientos
3. Escogió
matemáticos
procedimientos que lo
indicados dado el llevaron a una solución
problema.
elegante.
4. Utilizó la terminología
con alta precisión.
1. Escogió una
representación apropiada
para el problema.
1. Escogió una
representación
inadecuada del problema.
2. Estrategias y
1. Escogió estrategias
Razonamiento:
innovadoras.
evidencia de que el
2. Demostró que la
estudiante siguió solución es correcta y el
un plan lógico,
enfoque es válido.
verificable y
replicable para
3. Utilizó un enfoque
resolver el
sofisticado.
problema.
Dominio
No Acreditado
0
1. Escogió formas de
representación
equivocadas.
3. Escogió
procedimientos que
llevan a una solución
correcta.
4. Utilizó la terminología
correctamente.
2. Utilizó parte de la
información relevante,
pero no toda.
3. Escogió
procedimientos que
llevan a una solución
parcialmente correcta.
4. Utilizó la terminología
con imprecisión.
3. Escogió
procedimientos que no
llevan a una solución
correcta.
4. Utilizó la terminología
incorrectamente.
1. Escogió estrategias
eficientes.
1. Escogió estrategias
simplistas.
1. Escogió estrategias
inapropiadas.
2. Justificó cada paso de
la solución.
2. Dio muy poca o
ninguna explicación de la
estrategia utilizada.
2. No supo cómo abordar
el problema.
3. El proceso utilizado lo
puede llevar a una
solución correcta.
3. El proceso utilizado lo
lleva a una solución
parcialmente correcta.
3. El proceso utilizado no
lo puede llevar a una
solución correcta.
2. Utilizó toda la
información relevante.
2. Utilizó información
incorrecta.
Elemento 3
…
…
…
…
Elemento 4
…
…
…
…
Evaluación de un reporte de
investigación
Dominio
Pobre
Suficiente
Aceptable
• El contenido es incomprensible
y/o no convincente
• Los argumentos principales están
expuestos, pero no están bien
fundamentados
• La investigación es inadecuada o
no está dirigida a los conceptos
relevantes
• Contenido inconsistente en
cuanto a propósito y claridad de
ideas
• Párrafos con estructura difícil de
seguir
• Las transiciones entre párrafos
requieren mejoría
• El reporte cumple con la mayoría
las recomendaciones sugeridas
• El contenido es comprensible,
acertado y convincente
• Los argumentos principales están
expuestos claramente y están bien
fundamentados
• La investigación es adecuada,
oportuna y se ocupa de los
conceptos relevantes
• El contenido y propósito del
reporte son claros
• Párrafos de longitud inadecuada o • El reporte es demasiado largo o
excesiva
demasiado corto.
• El reporte contiene numerosos
• El reporte contiene pocos errores
errores de gramática, puntuación
de gramática, puntuación y
y ortografía
ortografía
• La longitud del reporte es
adecuada
• Se hace uso correcto de las reglas
de gramática, puntuación y la
ortografía es correcta
• Contenido incompleto
• Los argumentos principales son
no claros y/o no convincentes
Contenido y
Desarrollo
Organización y
Estructura
• La organización y estructura
distraen del mensaje del autor
• Párrafos disjuntos y carentes de
transición de las ideas
• El reporte carece de muchos
elementos para un buen formato
• La estructura de los párrafos es
clara y fácil de seguir
• El reporte sigue todas las
recomendaciones sugeridas
Formato
Gramática,
Puntuación y
Ortografía
• El lenguaje utilizado está lleno de
expresiones coloquiales o tono
conversacional
• El lenguaje carece de claridad o
• El lenguaje es claro y preciso, las
incluye algunas expresiones
oraciones muestran de manera
coloquiales o tono conversacional consistente una estructura
robusta y variada
Evaluación del proyecto ‘encuesta’
Deficiente
Técnicas de
Muestreo
Regular
Uso de técnicas de
Uso de técnicas de
muestreo apropiadas;
muestreo inapropiadas. errores grandes en la
ejecución.
Pocas preguntas
Preguntas inapropiadas
Preguntas de la
pertinentes; los datos
para obtener la
encuesta
obtenidos son
información deseada.
inadecuados.
Análisis
estadístico
Ningún intento por
resumir los datos
recolectados.
Hay un intento de
análisis de datos, con
procedimientos poco
apropiados.
Comunica alguna
Comunicación de
información importante;
Comunicación de resultados incompleta,
no organizada no lo
resultados
desorganizada y difícil
suficiente para
de seguir.
fundamentar sus
conclusiones.
Bueno
Excelente
Uso de técnicas de
Uso de técnicas de
muestreo apropiadas;
muestreo
muy pocos errores en
apropiadas;no hay
la ejecución.
errores en la ejecución.
La mayoría de las
Todas las preguntas
preguntas son
son pertinentes; los
pertinentes; los datos
datos están completos.
obtenidos son
adecuados.
Hace uso de
Todos los
procedimientos
procedimientos
analíticos apropiados, analíticos utilizados son
pero el análisis es
apropiados para
incompleto.
resumir los datos.
Comunica la mayoría
de la información
importante; muestra
fundamento en sus
conclusiones.
La comunicación de
resultados es extensa;
muestra visión de cómo
los datos predicen las
conclusiones.
Componentes de Rúbrica analítica:
Excelente
Muy Bueno
3
2
Mínimamente
Competente
1
1. Escogió una
representación que ayuda
1. Entendimiento a entender el problema.
del Concepto:
Interpretación del
2. Utilizó información
problema, uso de
aparentemente oculta.
representaciones y
procedimientos
3. Escogió
matemáticos
procedimientos que lo
indicados dado el llevaron a una solución
problema.
elegante.
4. Utilizó la terminología
con alta precisión.
1. Escogió una
representación apropiada
para el problema.
1. Escogió una
representación
inadecuada del problema.
1. Escogió formas de
representación
equivocadas.
2. Utilizó toda la
información relevante.
2. Utilizó parte de la
información relevante,
pero no toda.
2. Utilizó información
incorrecta.
3. Escogió
procedimientos que
llevan a una solución
correcta.
4. Utilizó la terminología
correctamente.
3. Escogió
procedimientos que
llevan a una solución
parcialmente correcta.
4. Utilizó la terminología
con imprecisión.
3. Escogió
procedimientos que no
llevan a una solución
correcta.
4. Utilizó la terminología
incorrectamente.
2. Estrategias y
1. Escogió estrategias
Razonamiento:
innovadoras.
evidencia de que el
2. Demostró que la
estudiante siguió solución es correcta y el
un plan lógico,
enfoque es válido.
verificable y
replicable para
3. Utilizó un enfoque
resolver el
sofisticado.
problema.
1. Escogió estrategias
eficientes.
1. Escogió estrategias
simplistas.
1. Escogió estrategias
inapropiadas.
2. Justificó cada paso de
la solución.
2. Dio muy poca o
ninguna explicación de la
estrategia utilizada.
2. No supo cómo abordar
el problema.
3. El proceso utilizado lo
puede llevar a una
solución correcta.
3. El proceso utilizado lo
lleva a una solución
parcialmente correcta.
3. El proceso utilizado no
lo puede llevar a una
solución correcta.
Dominio
No Acreditado
0
Elementos del dominio o criterio
Elemento 3
…
…
…
…
Elemento 4
…
…
…
…
Componentes de Rúbrica analítica:
Excelente
Muy Bueno
3
2
Mínimamente
Competente
1
1. Escogió una
representación que ayuda
1. Entendimiento a entender el problema.
del Concepto:
Interpretación del
2. Utilizó información
problema, uso de
aparentemente oculta.
representaciones y
procedimientos
3. Escogió
matemáticos
procedimientos que lo
indicados dado el llevaron a una solución
problema.
elegante.
4. Utilizó la terminología
con alta precisión.
1. Escogió una
representación apropiada
para el problema.
1. Escogió una
representación
inadecuada del problema.
1. Escogió formas de
representación
equivocadas.
2. Utilizó toda la
información relevante.
2. Utilizó parte de la
información relevante,
pero no toda.
2. Utilizó información
incorrecta.
3. Escogió
procedimientos que
llevan a una solución
correcta.
4. Utilizó la terminología
correctamente.
3. Escogió
procedimientos que
llevan a una solución
parcialmente correcta.
4. Utilizó la terminología
con imprecisión.
3. Escogió
procedimientos que no
llevan a una solución
correcta.
4. Utilizó la terminología
incorrectamente.
2. Estrategias y
1. Escogió estrategias
Razonamiento:
innovadoras.
evidencia de que el
2. Demostró que la
estudiante siguió solución es correcta y el
un plan lógico,
enfoque es válido.
verificable y
replicable para
3. Utilizó un enfoque
resolver el
sofisticado.
problema.
1. Escogió estrategias
eficientes.
1. Escogió estrategias
simplistas.
1. Escogió estrategias
inapropiadas.
2. Justificó cada paso de
la solución.
2. Dio muy poca o
ninguna explicación de la
estrategia utilizada.
2. No supo cómo abordar
el problema.
3. El proceso utilizado lo
puede llevar a una
solución correcta.
3. El proceso utilizado lo
lleva a una solución
parcialmente correcta.
3. El proceso utilizado no
lo puede llevar a una
solución correcta.
Dominio
Criterios de ejecución
No Acreditado
0
Elemento 3
…
…
…
…
Elemento 4
…
…
…
…
Componentes de Rúbrica Analítica:
Excelente
Muy Bueno
3
2
Mínimamente
Competente
1
1. Escogió una
representación que ayuda
1. Entendimiento a entender el problema.
del Concepto:
Interpretación del
2. Utilizó información
problema, uso de
aparentemente oculta.
representaciones y
procedimientos
3. Escogió
matemáticos
procedimientos que lo
indicados dado el llevaron a una solución
problema.
elegante.
4. Utilizó la terminología
con alta precisión.
1. Escogió una
representación apropiada
para el problema.
1. Escogió una
representación
inadecuada del problema.
1. Escogió formas de
representación
equivocadas.
2. Utilizó toda la
información relevante.
2. Utilizó parte de la
información relevante,
pero no toda.
2. Utilizó información
incorrecta.
3. Escogió
procedimientos que
llevan a una solución
correcta.
4. Utilizó la terminología
correctamente.
3. Escogió
procedimientos que
llevan a una solución
parcialmente correcta.
4. Utilizó la terminología
con imprecisión.
3. Escogió
procedimientos que no
llevan a una solución
correcta.
4. Utilizó la terminología
incorrectamente.
2. Estrategias y
1. Escogió estrategias
Razonamiento:
innovadoras.
evidencia de que el
2. Demostró que la
estudiante siguió solución es correcta y el
un plan lógico,
enfoque es válido.
verificable y
replicable para
3. Utilizó un enfoque
resolver el
sofisticado.
problema.
1. Escogió estrategias
eficientes.
1. Escogió estrategias
simplistas.
1. Escogió estrategias
inapropiadas.
2. Justificó cada paso de
la solución.
2. Dio muy poca o
ninguna explicación de la
estrategia utilizada.
2. No supo cómo abordar
el problema.
3. El proceso utilizado lo
puede llevar a una
solución correcta.
3. El proceso utilizado lo
lleva a una solución
parcialmente correcta.
3. El proceso utilizado no
lo puede llevar a una
solución correcta.
Dominio
Descriptores del criterio
No Acreditado
0
Elemento 3
…
…
…
…
Elemento 4
…
…
…
…
Componentes de Rúbrica analítica:
Excelente
Muy Bueno
3
2
Mínimamente
Competente
1
1. Escogió una
representación que ayuda
1. Entendimiento a entender el problema.
del Concepto:
Interpretación del
2. Utilizó información
problema, uso de
aparentemente oculta.
representaciones y
procedimientos
3. Escogió
matemáticos
procedimientos que lo
indicados dado el llevaron a una solución
problema.
elegante.
4. Utilizó la terminología
con alta precisión.
1. Escogió una
representación apropiada
para el problema.
1. Escogió una
representación
inadecuada del problema.
1. Escogió formas de
representación
equivocadas.
2. Utilizó toda la
información relevante.
2. Utilizó parte de la
información relevante,
pero no toda.
2. Utilizó información
incorrecta.
3. Escogió
procedimientos que
llevan a una solución
correcta.
4. Utilizó la terminología
correctamente.
3. Escogió
procedimientos que
llevan a una solución
parcialmente correcta.
4. Utilizó la terminología
con imprecisión.
3. Escogió
procedimientos que no
llevan a una solución
correcta.
4. Utilizó la terminología
incorrectamente.
2. Estrategias y
1. Escogió estrategias
Razonamiento:
innovadoras.
evidencia de que el
2. Demostró que la
estudiante siguió solución es correcta y el
un plan lógico,
enfoque es válido.
verificable y
replicable para
3. Utilizó un enfoque
resolver el
sofisticado.
problema.
1. Escogió estrategias
eficientes.
1. Escogió estrategias
simplistas.
1. Escogió estrategias
inapropiadas.
2. Justificó cada paso de
la solución.
2. Dio muy poca o
ninguna explicación de la
estrategia utilizada.
2. No supo cómo abordar
el problema.
3. El proceso utilizado lo
puede llevar a una
solución correcta.
3. El proceso utilizado lo
lleva a una solución
parcialmente correcta.
3. El proceso utilizado no
lo puede llevar a una
solución correcta.
Dominio
Escala
(niveles de ejecución, puntuaciones a otorgar)
No Acreditado
0
Elemento 3
…
…
…
…
Elemento 4
…
…
…
…
Características de una Rúbrica
1. Continuidad en la escala: el cambio en calidad de un nivel de
ejecución al siguiente debe ser “igual” en todos los intervalos; los
criterios de ejecución deben reflejar esta continuidad.
2. Paralelismo en los criterios: cada descriptor debe mantener
paralelismo con sus descriptores vecinos, en términos del lenguaje
utilizado en cada oración.
3. Coherencia en los criterios: aun cuando los descriptores son
diferentes para distintos niveles de ejecución, los cambios se
deben referir a cambios en calidad para un mismo criterio.
4. Válida: permite evaluar lo relevante en el dominio, no lo que es fácil
de observar y/o calificar.
5. Confiable: ofrece resultados consistentes para distintos jueces,
distintos examinados y distintos tiempos.
Pasos para diseñar una rúbrica analítica:
1. Examinar los objetivos de aprendizaje a los que se referirá la tarea.
Redactar los elementos del dominio.
2. Identificar las evidencias específicas, observables, que se desee
muestre el examinado durante el desarrollo de la tarea, para cada
elemento del dominio. Ubicarlas en el nivel de ejecución que les
corresponda.
3. Hacer una lluvia de ideas para encontrar características que
describan cada evidencia en el resto de los niveles de ejecución.
Estas características se convertirán en los descriptores del criterio.
4. Redactar descripciones narrativas detalladas para el desempeño
Excelente, Muy Bueno, Mínimamente Aceptable y No Acreditado,
para cada una de las evidencias.
5. Revisar continuamente la rúbrica, después de cada aplicación.
Bibliografía
• Thomas M. Haladyna, “Developing and Validating
Multiple-Choice Test Items”, Lawrence Erlbaum
Associates, 2004.
• Thomas M. Haladyna, “Writing Test Items to Evaluate
Higher Order Thinking”, Allyn & Bacon, 1997.