Diseño de evaluaciones

Objetivo de la lección: generar ítems y rúbricas que luego validarás.

Diseña una prueba breve de comprensión lectora para nivel [NIVEL] a partir del texto que te doy.

- 3 preguntas de opción múltiple (3 opciones, distractores plausibles que aparezcan en el texto o sean lógicos).
- 3 ítems de verdadero / falso / no se dice.
- 1 pregunta de inferencia con respuesta abierta breve.
- Clave de respuestas con la línea del texto que justifica cada respuesta.

Comprueba que ninguna pregunta se pueda responder sin leer el texto.

TEXTO:
[PEGA AQUÍ EL TEXTO]

Crea una rúbrica analítica de 4 niveles (inicial, en desarrollo, adecuado, destacado) para evaluar esta tarea oral de nivel [NIVEL]: [DESCRIPCIÓN DE LA TAREA].

Criterios: cumplimiento de la tarea, fluidez, corrección, alcance léxico, coherencia, pronunciación e interacción.
Los descriptores deben ser observables y propios de un nivel [NIVEL] (no de un nativo).
Formato: tabla.

#Qué debe medir una prueba

Antes de generar ningún ítem, decide qué quieres medir. Una prueba de comprensión lectora no mide lo mismo que una de gramática, y ninguna de las dos mide bien la expresión oral. Un error habitual es pedirle a la IA «un examen de nivel B1» y recibir una mezcla de preguntas de léxico, gramática y lectura sin una finalidad clara. Define primero el objetivo de aprendizaje, el tipo de evaluación (formativa, para orientar la siguiente clase, o sumativa, para certificar un avance) y el tiempo disponible.

En la evaluación formativa, los ítems sirven para ajustar la enseñanza, así que conviene que sean breves y que el error sea informativo. En la sumativa, la fiabilidad importa más: cada ítem debe tener una única respuesta defendible y la prueba debe poder compararse entre estudiantes o entre momentos.

#Ítems de opción múltiple con distractores plausibles

Un buen distractor es una respuesta que un estudiante con un error concreto elegiría. Si el distractor es absurdo, el ítem mide muy poco. Para construirlos, piensa en los errores previsibles de tu estudiante según su lengua materna y en las confusiones típicas del nivel (ser y estar, por y para, pretérito imperfecto e indefinido). Después, comprueba que solo una opción sea correcta según el texto.

Una regla práctica: la respuesta correcta no debe ser siempre la más larga ni la única que repite palabras del enunciado. Varía la posición de la clave y revisa que no haya un patrón reconocible.

#Verdadero, falso o no se dice

El formato «verdadero, falso o no se dice» sirve para comprobar la comprensión de detalle, pero exige una redacción muy cuidadosa. Las afirmaciones falsas deben contradecir el texto de forma clara, y las de «no se dice» deben referirse a algo plausible que el texto no menciona. Si una afirmación podría ser verdadera o falsa según la interpretación, descártala: el estudiante acertará o fallará por motivos ajenos a la lectura.

#Validar la prueba antes de usarla

Ninguna prueba generada debe llegar al estudiante sin validación. Te propongo cuatro comprobaciones:

1. Resuélvela tú sin mirar la clave y anota el tiempo.
2. Comprueba que ningún ítem se responde sin leer el texto, por conocimiento general o por lógica de la frase.
3. Verifica que cada ítem evalúa un único aspecto; si una pregunta mezcla vocabulario y gramática, sepárala en dos.
4. Revisa que la clave coincide con el texto y con tus propias respuestas. Si hay discrepancias, la prueba todavía no está lista.

Si puedes, prueba la prueba con un colega o con un estudiante simulado y observa dónde duda.

#Rúbricas con descriptores observables

Una rúbrica analítica divide la tarea en criterios y describe cada nivel de desempeño. Los descriptores deben ser observables: «hace pausas largas para buscar palabras» es evaluable; «habla bien» no lo es. En una tarea oral, cada criterio debe poder juzgarse escuchando una grabación o tomando notas durante la conversación.

Ten cuidado con los descriptores que dependen de comparar con un hablante nativo. En los niveles intermedios, un estudiante puede ser claro y eficaz sin sonar como un nativo, y la rúbrica debe reconocerlo. Usa como referencia las descripciones del Marco común europeo de referencia para las lenguas, y pide a la IA que la propuesta sea propia de tu nivel y no de un hablante competente.

#Ejemplo trabajado: un ítem mejorable

Versión inicial generada: «¿Dónde estaba Ana cuando llamó su madre? a) En casa. b) En el trabajo. c) Estaba cansada.»

Problemas: la opción c no responde a la pregunta, así que es un distractor absurdo; y la pregunta puede responderse sin leer el texto si el lector imagina la situación. Versión mejorada: «Según el texto, ¿dónde estaba Ana cuando llamó su madre? a) En casa, con los niños. b) En el supermercado, esperando su turno. c) En el trabajo, reunida con su jefe.» Las tres opciones son del mismo tipo, la respuesta exige localizar un dato del texto y los distractores corresponden a lugares que el texto podría mencionar en otro párrafo. Compara esta reescritura con la clave original y verifica que coincide con el texto.

#Equidad y accesibilidad

Una prueba también mide lo que no quieres medir si está mal diseñada. Evita textos que requieran conocimiento cultural específico que el estudiante puede no tener, como referencias a programas de televisión locales sin contexto. Ajusta el tiempo a la diversidad de tus estudiantes y ofrece formatos alternativos cuando un estudiante tenga dificultades de lectura o de visión. Si una pregunta depende de un audio, un enlace o una función que no funcionará en tu plataforma, sustitúyela antes de la prueba y no durante ella.

#Plan de 60 minutos