DIRECCIÓN DE EVALUACIÓN EDUCATIVA CURSO-TALLER ELABORACIÓN DE INSTRUMENTOS (Construcción de Reactivos) OBJETIVOS DEL CURSO-TALLER Dar a conocer una propuesta teóricometodológica para la elaboración de instrumentos de Introducir a los evaluación. participantes.

Download Report

Transcript DIRECCIÓN DE EVALUACIÓN EDUCATIVA CURSO-TALLER ELABORACIÓN DE INSTRUMENTOS (Construcción de Reactivos) OBJETIVOS DEL CURSO-TALLER Dar a conocer una propuesta teóricometodológica para la elaboración de instrumentos de Introducir a los evaluación. participantes.

Slide 1

DIRECCIÓN DE
EVALUACIÓN EDUCATIVA

CURSO-TALLER
ELABORACIÓN DE INSTRUMENTOS
(Construcción de Reactivos)


Slide 2

OBJETIVOS DEL CURSO-TALLER
Dar a conocer una
propuesta teóricometodológica para la

elaboración de
instrumentos de

Introducir a los

evaluación.

participantes en la
elaboración de pruebas
escritas válidas y
confiables, que midan el
aprovechamiento escolar de
los alumnos.

1


Slide 3

LOGÍSTICA DEL CURSO-TALLER
Tratamiento referencial de aspectos
metodológicos que se involucran en
los procesos de construcción de
reactivos e instrumentos

 Carácter
teórico-práctico

Ejercitación de lo tratado en el
plano teórico, con énfasis en los
procesos de análisis de materiales
y construcción de reactivos

Realización de todas las etapas
que involucra la elaboración de
instrumentos, desde el análisis de
materiales hasta el ensamblaje
de los instrumentos definitivos,
incluidos los procesos de revisión
y validación

2


Slide 4

Captación de Información
Observación

y/o

EVALUACIÓN
Medición

Juicios de valor
en función de parámetros

3


Slide 5

TIPOS DE EVALUACIÓN
(TEMPORALIDAD)

EVALUACION
DIAGNÓSTICA

Se realiza para conocer el nivel de aprendizajes precurrentes que
tienen los educandos para iniciar un curso, área, asignatura, tema
o unidad.

EVALUACION
FORMATIVA

Se realiza para conocer el nivel de aprendizajes que han alcanzado
los educandos al término de cada etapa del proceso enseñanzaaprendizaje.

EVALUACION
SUMARIA

Se realiza para conocer el nivel de aprendizajes adquiridos por
los educandos al término del curso escolar.

4


Slide 6

EVALUACIÓN DEL APRENDIZAJE
Con referencia a
CRITERIO

Con referencia a
NORMA



Se compara al individuo con los
resultados del grupo evaluado.



Se comparan los aciertos de
un individuo con un criterio
absoluto.



Útil para establecer el orden o
jerarquía de los individuos dentro
de un grupo, de acuerdo con sus
resultados.



Útil para determinar si se
domina o no un contenido; si
se cuenta con los elementos
mínimos indispensables para
saber y saber hacer.

5


Slide 7

CARACTERÍSTICAS DE LOS INTRUMENTOS DE MEDICIÓN

VALIDEZ
CONFIABILIDAD
Permite determinar si un
instrumento mide lo que
se quiere medir, cumple la
función para la cual se
construyó.

6


Slide 8

ALGUNOS TIPOS DE VALIDEZ
DE CONTENIDO
¿EL INSTRUMENTO REFLEJA PERTINENTEMENTE
LOS “CONTENIDOS A EXPLORAR” Y LA
RELEVANCIA DE ELLOS ?

DE CONSTRUCTO
¿EL INSTRUMENTO EXPLORA PERTINENTEMENTE
EL “CONSTRUCTO TEÓRICO” ?

PREDICTIVA
¿EL INSTRUMENTO
PERMITE “SUPONER” UN
COMPORTAMIENTO FUTURO DE UN SUJETO O
UNA POBLACIÓN ?

7


Slide 9

PROCESO DE ELABORACIÓN DE INSTRUMENTOS

ANALIZAR
MATERIALES

RELACIONAR Y
SELECCIONAR
CONTENIDOS

ELABORAR TABLA
DE
ESPECIFICACIONES

NO

APRUEBAR
REACTIVOS



DISCUTIR
REACTIVOS

CONSTRUIR
REACTIVOS

ENSAMBLAR

8


Slide 10

ANÁLISIS DE LOS MATERIALES

El análisis de contenido de los
materiales es un proceso ordenado,
objetivo, cuantitativo y cualitativo.
Los

materiales

son:

plan

y

programas, libros de texto (libro de
alumnos y docentes).

9


Slide 11

ANÁLISIS DEL MATERIAL FUENTE
CONTENIDOS

REFERENCIAS
BIBLIOGRAFICAS

En estas dos columnas el
docente deberá identificar
como están agrupados los
contenidos, de acuerdo a los
planes y programas de
estudio de su nivel y
modalidad educativa.

10


Slide 12

PROCESO PARA EL ANÁLISIS DE MATERIALES
OBJETIVO: ELABORAR TABLA DE ESPECIFICACIONES

DEFINIR LA UNIDAD
DE ANÁLISIS

MATERIAL FUENTE

ESTABLECER
CRITERIOS

DESARROLLAR
EL ANÁLISIS

REPLANTEAR
O
CORREGIR

NO

REVISIÓN
DEL
ANÁLISIS

SI

RELACIÓN DE
OBJETIVOS O CONTENIDOS

11


Slide 13

MODELO DE ANÁLISIS
CRITERIOS
DE ANÁLISIS
CONTENIDOS

RELEVANTE

SI

NO

MENSURABLE

SI

OBSERVACIONES

NO

12


Slide 14

TABLA DE ESPECIFICACIONES

Con base en los contenidos seleccionados
producto del análisis de los materiales, se
procede

a

construir

la

tabla

de

especificaciones, que es la estructura o
esquema del instrumento.

13


Slide 15

ELABORACIÓN DE LA TABLA DE ESPECIFICACIONES

UNIDAD DE
ANÁLISIS

CRITERIOS
DE ANÁLISIS

RELACIÓN DE CONTENIDOS
A MEDIR

IDENTIFICACIÓN DE LOS
NIVELES DE
COMPLEJIDAD

TABLA DE ESPECIFICACIONES

14


Slide 16

NIVELES DE COMPLEJIDAD
TAXONOMIA
1. HECHOS


En este nivel se alude a procesos de memorización.



Se identifican y reconocen, objetos, sucesos, ideas o fenómenos en

función de sus atributos o características.


Supone la evocación o recuerdo de información concreta, asociada a
símbolos especiales o términos sencillos directos.
Palabras clave: Datos, nombrar, identificar, repetir, ¿qué, quién, cuándo,

dónde?.

Ejemplos:








El autor de una novela
La notación aritmética
Partes de una planta
Recursos naturales de una región
Los nombres de acontecimientos, fechas y
lugares
Las capitales de los estados

15


Slide 17

NIVELES DE COMPLEJIDAD
TAXONOMIA
2. CONCEPTOS Y PRINCIPIOS


En este nivel se reconocen significados, es decir términos que designan
a un conjunto de ideas, sucesos o atributos.



Se definen y agrupan propiedades, alrededor de una clase.



Comprensión o uso de un conocimiento e idea específica, sin la
necesidad de agruparla con otras o de conocer sus implicaciones
totales.



En el caso de los principios, estos aluden a los fundamentos o bases en
los que se apoya la formulación de un estudio o conocimiento.
Palabras clave: comprensión, explicación, descripción, asociación,
diferenciar, interpreta, compara, parafrasea


Ejemplos:






Isomorfismo del sistema de números reales y puntos de una
recta
El ciclo hidrológico
Fundamentos de la nomenclatura empleada en la
clasificación de los climas
Los principios del federalismo
Conceptos

16


Slide 18

NIVELES DE COMPLEJIDAD
TAXONIMIA
3. APLICACIÓN DE PROCEDIMIENTOS


Este nivel significa hacer uso del conocimiento.



Permite identificar una secuencia de acciones en el tiempo.



En procedimientos complejos se evoca la estructura conceptual del
sistema.



La conceptualización permite realizar relaciones de covariación, causalidad
o prescripciones descriptivo –explicativo o prescritiva según las
características de las relaciones en juego.



Selecciona transfiere y utiliza información para completar una tarea
Palabras clave: aplicación de procedimientos, ordenamiento, identificación
de secuencias, organizar, clasificar, experimenta, construye.

Ejemplos:







La organización de un debate
El algoritmo de las operaciones aritméticas básicas
Metabolismo
Transformaciones energéticas
Los pasos a seguir en la inscripción de un alumno irregular

17


Slide 19

NIVELES DE COMPLEJIDAD
TAXONOMIA
4. RESOLUCIÓN DE PROBLEMAS


En este nivel se analizan, comprenden y resuelven problemas.



Permite el desarrollo del pensamiento divergente.



Implica la selección y empleo de una o más reglas, normas y
operaciones posibles, a la par del manejo de la estructura teórica.



Conlleva a un análisis de medios y fines, supone el empleo de
operaciones por analogía o por transferencia.
Palabras clave: análisis, síntesis, inferir, solucionar, arreglar, contrastar



Ejemplos:




La resolución de problemas aritméticos.
Efectos secundarios de la eliminación de un eslabón
de cadenas alimenticias.
La deducción de la escala de un mapa.
Causas, factores y consecuencias que posibilitan la
aparición de acontecimientos o fenómenos.

18


Slide 20

NIVELES DE COMPLEJIDAD
TAXONOMIA
5. GENERALIZACIÓN


Este nivel supone elaboración de juicios acerca de materiales y métodos
utilizados.



Construcción

de

nuevos

planteamientos

a

partir

de

relaciones,

propiedades, procesos y/o sistemas.


Lleva a valorar o criticar con base en criterios previamente definidos.



Permite combinar ideas para integrar un producto, plan o propuesta
nuevos.

Palabras

clave:

generalización,

emisión

de

juicios,

evaluación,

construcción de propuestas, innovación, plantea hipótesis, diseña, planea,
justifica ¿qué pasa si?

Ejemplos:






Fórmulas generales en ciencias.
Procesos de síntesis.
Planteamiento de teoremas.
Mapas conceptuales.

19


Slide 21

4. RESOLUCIÓN DE
PROBLEMAS
Analiza, sintetiza
modela, deriva,
interpreta

2. CONCEPTOS Y
PRINCIPIOS

5. GENERALIZACIÓN

Alto nivel

Bajo nivel

Explica, parafrasea

1. HECHOS

Juzga, justifica, propone,
diseña, critica

3. APLICACIÓN DE
PROCEDIMIENTOS
Calcula, resuelve,
determina, aplica

Recordar, reconocer información

20


Slide 22

TABLA DE ESPECIFICACIONES

NIVELES DE
COMPLEJIDAD
UNIDAD

CONTENIDOS

1

2

3

4

5

T
O
T
A
L

SUBTOTAL

SUBTOTAL

SUBTOTAL
TOTAL

21


Slide 23

PROCESO DE ELABORACIÓN DE REACTIVOS

TABLA DE
ESPECIFICACIONES

CONSTRUCCIÓN DE
REACTIVOS

REVISIÓN Y
DISCUSIÓN
EN COLEGIADO
REACTIVOS



NO

REALIZAR
CORRECCIONES

22


Slide 24

¿QUÉ ES UN REACTIVO?


Unidad mínima de una prueba.



Pregunta o sentencia diseñada para explorar la
existencia de un conocimiento, habilidad o

actitud.


Preguntar lo que queremos medir.



Se

elabora para medir

y no solamente

preguntar.


Tiene como fin determinar cuánto sabe el
alumno y no demostrar qué no sabe.

23


Slide 25

CLASIFICACIÓN DE REACTIVOS

Según tipo de respuesta

Características

Abierta:

Ensayo

Respuesta breve o
complementación

Canevá sin opciones




Subjetivos
Difícil calificación e
interpretación

Cerrada:

Ordenamiento o
jerarquización

Correspondencia

Opción múltiple

Canevá con opciones




Objetivos
Mayor facilidad de
calificar exento de
interpretaciones

24


Slide 26

NORMAS GENERALES PARA
LA CONSTRUCCION DE REACTIVOS



Deben apegarse a la información fuente y considerar los
contenidos establecidos en la tabla de especificaciones.



Debe plantear un problema o situación bien definida: incluir los

elementos necesarios y suficientes para su solución, escribirse
con claridad.


Deben ser redactarse en términos sencillos, claros y precisos,
con base en el lenguaje propio de nivel, asignatura y grado

educativo.


Deben ser independientes entre si para evitar que unos ayuden a
contestar otros.

25


Slide 27

NORMAS GENERALES PARA
LA CONSTRUCCION DE REACTIVOS


Para cada tipo de reactivo es pertinente señalar el procedimiento de

resolución.


Debe evitarse formularlos con la misma redacción utilizada en las
fuentes de información, excepto cuando se trate de leyes y
definiciones, (estas deberán entrecomillarse).



Debe evitarse el planteamiento de reactivos que incomoden al
alumno.



Debe evitar involucrar de manera irónica, nombres de funcionarios o
instituciones.



Evitar la mención de marcas de productos y/o situaciones que
fomenten su consumo y los vicios.

26


Slide 28

NORMAS PARA LOS REACTIVOS
DE RESPUESTA CERRADA


Los enunciados deberán tener una estructura y extensión similar.



La disposición de los enunciados y de las opciones de respuesta debe
ser azarosa o, en tal caso, ordenarse por su extensión.



Entre la pregunta y las opciones debe haber coherencia gramatical; una
excepción a esta norma se da cuando se explora “correspondencia
gramatical”.



Los distractores deben erigirse como “virtuales soluciones” al problema
planteado, es decir, deben ser errores de razonamiento. Pero la

construccíón de estos deben realizarse con la pretensión de que éstos
sean abordados por los “que no saben”.


Las opciones propuestas deben estar equilibradas en cuanto a su
extensión.

27


Slide 29

NORMAS PARA ELABORAR REACTIVOS DE
ORDENAMIENTO O JERARQUIZACIÓN
Los elementos que conforman un reactivo de
ordenamiento o jerarquización deben presentarse en
forma de lista.
Los componentes del reactivo deben
homogéneos en cuanto a campo semántico.

ser

Por cuestiones meramente de presentación se
recomienda que la estructura así como la extensión
de los componentes debe ser similar (si se trata de
palabras).
Para cada reactivo de este tipo debe especificarse
claramente
el
criterio
de
ordenamiento
o
jerarquización.

28


Slide 30

NORMAS PARA ELABORAR REACTIVOS
DE CORRESPONDENCIA
(RELACIÓN DE COLUMNAS)
 El bloque de reactivos de correspondencia consta de dos
componentes: un conjunto de preguntas y un grupo de
respuestas correctas con opciones distractoras.
 Tanto preguntas como opciones de respuesta pueden tener
una estructura variada (ser nombres, ideas completas,
dibujos o gráficos).
 La estructura de las preguntas debe ser la misma. De igual
forma, debe ser con el conjunto de opciones (aunque su
estructura respecto de las preguntas sea diferente).
 Se recomienda que tanto las preguntas como las opciones
de respuesta sean breves en su expresión. No obstante, en
las preguntas la extensión puede ser un poco mayor por ser
el planteamiento base.

29


Slide 31

NORMAS PARA ELABORAR REACTIVOS
DE CORRESPONDENCIA
(RELACIÓN DE COLUMNAS)
 Es recomendable que la cantidad de preguntas en un
bloque sea de acuerdo con la extensión y complejidad
del contenido a evaluar.
 En el grupo de respuestas se recomienda incluir dos
distractores.
 Debe evitarse la repetición de términos entre el grupo de
preguntas y el grupo de opciones de respuesta.
 Cada una de las opciones de respuesta del bloque debe
ofrecer una virtual solución a cada una de las preguntas.
 Cada una de las preguntas debe admitir sólo una
respuesta correcta.

30


Slide 32

NORMAS PARA ELABORAR REACTIVOS
DE OPCIÓN MÚLTIPLE



La pregunta debe estar bien definida, que tenga sentido
propio.



La comprensión del problema a resolver no debe de

depender de la lectura de las opciones de respuesta.


Sólo una de las opciones debe responder correcta y
completamente el problema planteado.



Los distractores no deben ser parcialmente correctos. Sólo
en el caso en que se pregunte por la opción más correcta,
y se recomienda resaltar dicha expresión.

31


Slide 33

NORMAS PARA ELABORAR REACTIVOS
DE OPCIÓN MÚLTIPLE

Las opciones deben guardar entre sí un equilibrio en su aspecto
gramatical en: sintaxis, género, número, persona, tiempo y modo,
excepto cuando se pregunte por estos aspectos en inglés y español.
Debe evitarse la sinonimia o repetición de términos entre la base y las

opciones de respuesta. En el caso de que la repetición sea “necesaria”,
debe equilibrarse en todas las opciones.
Debe evitarse el uso de declaraciones negativas en las opciones, pero si
fuese “necesario” hacerlo, debe equilibrarse en las otras opciones (al

menos en la mitad de ellas).

32


Slide 34

NORMAS PARA ELABORAR REACTIVOS
DE OPCIÓN MÚLTIPLE
Si las opciones de respuesta están constituidas por cifras numéricas,
éstas deben ordenarse en función de su valor (ascendente o
descendentemente) y alinearse en referencia con el punto decimal (sea
explícito o implícito). Esta norma no procede cuando se trata de
expresiones algebraicas.

No deben plantearse a modo de opciones expresiones del tipo: “todas
las anteriores”, “ninguna de las anteriores”...
Para fines de controlar en lo posible el factor azar al contestar, se
recomienda que, la respuesta correcta se ubique en un porcentaje
similar en cada una de las opciones (y sin guardar algún orden o sin
seguir repetitivamente un tren de respuestas).

33


Slide 35

NORMAS PARA ELABORAR REACTIVOS
DE CANEVÁ CON Y SIN OPCIONES


La pregunta debe expresar con claridad qué se espera
como respuesta del sustentante, así como el procedimiento
para emitir la respuesta.



Dado que este tipo de reactivos es una variante del de
opción múltiple en términos de su presentación y de la
forma de emitir la respuesta, se deberá aplicar la misma
normatividad.



Para los reactivos de canevá sin opciones, también se
aplican las normas de los reactivos de opción múltiple, con
la diferencia que no se presentan las opciones de
respuesta.

34


Slide 36

NORMAS PARA ELABORAR REACTIVOS
DE RESPUESTA BREVE
Los reactivos de respuesta breve o complementación se redactan
comúnmente como enunciados incompletos, como órdenes o
como preguntas que manifiestan el problema o situación a resolver
y que exigen -a manera de respuesta- una palabra o una frase
breve susceptible de ser debidamente controlada. Ello implica
abordar completamente la gama de posibles respuestas correctas.
El reactivo de respuesta breve debe inquirir sobre un problema
único y bien definido.

El reactivo debe expresarse de manera tal que la repuesta se
manifieste con una sola palabra (o elemento, según el caso) o una
frase breve.

35


Slide 37

NORMAS PARA ELABORAR REACTIVOS
DE RESPUESTA BREVE

El reactivo debe admitir una sola respuesta –que satisfaga
pertinentemente el problema o situación-, aunque ésta pueda
ser enunciada con sinónimos. En este sentido, los criterios de
calificación deben considerar dichos sinónimos.
El espacio determinado para la emisión de la respuesta debe
indicarse con una línea continua. La línea no debe ser
fraccionada aun cuando la respuesta implique más de una
palabra o elemento.
La extensión de la línea para la emisión de la respuesta no
debe constituirse en un determinante específico para contestar.

36


Slide 38

ALGUNAS CONSIDERACIONES DE LOS
REACTIVOS DE ENSAYO
₪ Los reactivos de ensayo (llamados también de composición o por temas)
obedecen a una clasificación de los instrumentos para indagar bajo un criterio
amplio que se refiere al “diseño” del instrumento y otro más específico que
tiene que ver con la “estructura”.
₪ Ante este tipo de reactivo, el sujeto sustentante debe –dado un
planteamiento- desarrollar información con “libertad” (acotado únicamente por
las condiciones que se establezcan en el planteamiento), demostrar su
habilidad para organizar sus ideas respecto del tema que se aborda,
manifestar su creatividad y su capacidad para analizar, argumentar,
enjuiciar... y plantear soluciones.
₪ En este sentido, su uso para explorar habilidades es muy rico (por ejemplo,
para observar procesos de desarrollo, síntesis o extrapolación de
información). No obstante, quizá sólo el maestro de aula –con otros
indicadores del “comportamiento cotidiano” del educando- podría controlar
“mejor” la respuesta y sugerir un diagnóstico “más atinado”.

37


Slide 39

FORMATO PARA EL CONTROL DE REACTIVOS
ASIGNATURA/ BLOQUE/NUCLEO:
Química (Bloque II)
GRADO:
Tercero

EJES TEMÁTICOS:

CONTENIDO:
Combustibles químicos. Alcoholes

REACTIVO: 18. Lee lo siguiente:
El etanol es el compuesto que se emplea en medicina y se conoce como alcohol
de caña o alcohol industrial. De los alcoholes que a continuación se presentan.
¿Cuál es el etanol?.
A)

CH3 - OH

B)

CH3 –CH2 -OH

C)

CH3 –CH2 –CH2-OH

D)

CH3 –CH2 –CH2 -CH2 -OH

No. REAC.: 18
AUTOR:

DGE

RC:

B

FECHA:

24/10/99

REF. BIBLIOGRÁFICA:
Plan y Programas de Estudio de Educación Secundaria 1993 pp. 95
Telesecundaria, Asignaturas Académicas, Conceptos Básicos, volumen I.
pp. 443
Nivel de complejidad: 2

38


Slide 40

FORMATO PARA EL CONTROL DE REACTIVOS
ASIGNATURA:
GRADO:

UNIDAD:
CONTENIDO:

REACTIVO:

No. DE REACTIVO:

REF. BIBLIO.:

AUTOR:
FECHA:

RESPUESTA CORRECTA:

NIVEL DE COMPLEJIDAD:

39


Slide 41

CRITERIOS PARA EL ENSAMBLAJE DEL INTRUMENTO
ALGUNAS RECOMENDACIONES PARA
CONSTRUIR BUENOS INSTRUMENTOS

SECUENCIA CRONOLOGICA



Que la prueba sea examinada por otra
persona



Se recomienda incluir entre tres y cuatro
tipos de reactivos, ya que cada uno
supone en su resolución una operación
mental distinta



Hacer comprensibles las instrucciones de
resolución.

4

3

2
1
GRADO DE DIFICULTAD

HECHOS

5
GENERALIZA
CIÓBN

RESOLUCIÓN DE
PROBLEMAS

APLICACIÓN DE
PROCEDIMIENTOS
CONCEPTOS
Y
PRINCIPIOS

NIVEL DE COMPLEJIDAD

40


Slide 42

DIRECCIÓN DE EVALUACIÓN EDUCATIVA

Correo electrónico:

[email protected]
Teléfono y fax:
01 (222) 2 29 69 01

41