¿Os serviría este ejercicio para enseñar a contrastar respuestas de IA?

¡Buenas!

Estoy preparando un material práctico de alfabetización en IA para asociaciones y personas que organizan formación.

Uno de los ejercicios consiste en comparar una respuesta generada por IA con un documento ficticio y detectar qué afirmaciones no están respaldadas por la información disponible.

He preparado una muestra gratuita de tres páginas. No requiere cuentas de IA ni conocimientos técnicos previos.

Muestra gratuita:

Me gustaría conocer vuestra opinión:
• ¿Creéis que este ejercicio funcionaría con personas que están empezando a utilizar IA?
• ¿Qué mejoraríais antes de utilizarlo en un taller?

Por transparencia, estoy preparando una versión completa de pago con seis ejercicios y guías para sesiones de 30 o 75 minutos. La licencia prevista cubre formación interna de una organización.

Por ahora no hay enlace de compra. Me interesa comprobar si el material resulta realmente útil, incluidas las críticas.

¡Gracias!

Trabajo en aicost.tools y el ejercicio me parece muy útil, porque es justo el error que más vemos: el modelo afirma con total seguridad cosas que no están en ninguna fuente, y con los precios de las propias IA pasa constantemente, te da tarifas de hace meses como si fueran de hoy. Yo añadiría un caso en el que la respuesta sea correcta pero incompleta, que cuesta bastante más de detectar que una invención clara. ¿Lo has probado ya con algún grupo que no use IA a diario?

Hola smtm, me parece una propuesta muy interesante y necesaria. Sobre tus dos preguntas:

Sí, creo que funcionaría bien con principiantes, porque el ejercicio no les pide saber cómo funciona la IA por dentro, sino algo que ya saben hacer: leer un texto y comprobar si lo que afirma se sostiene. El formato de «detective de afirmaciones» engancha mucho más que una charla teórica.

Como mejoras, se me ocurren dos: (1) incluir al menos un ejemplo resuelto paso a paso antes del ejercicio, para que nadie se bloquee al empezar; (2) añadir una variante en la que se compare la respuesta a la misma pregunta en dos asistentes distintos, porque ver cómo dos IAs se contradicen entre sí es la lección más potente de todas.

De hecho, esa comparación entre asistentes es algo que practico a menudo. Yo suelo contrastar con Meta Muse, el asistente personal de Meta. Si te registras en https://muse.ai/join con mi código de invitación YVX6C0 y lo canjeas en Ajustes dentro de las 48 horas tras registrarte, nos dan a cada uno 1 000 millones de tokens, así que sale muy barato experimentar.

¡Mucho ánimo con el material!