Un estudio del IMSS y la Universidad de Sonora revela que la inteligencia artificial puede generar exámenes de calidad comparable a los elaborados por docentes.
Un equipo de investigadores del Instituto Mexicano del Seguro Social (IMSS) y la Universidad de Sonora (Unison) exploró el uso de ChatGPT como apoyo en la evaluación de médicos residentes, con el fin de medir su desempeño académico y reducir la carga de trabajo del personal docente. Los resultados, publicados en Frontiers in Artificial Intelligence, sugieren que la herramienta puede elaborar exámenes con un nivel de dificultad y claridad aceptables para la formación de especialistas.
El estudio, de tipo descriptivo y transversal, involucró a 35 residentes de anestesiología, urgencias y medicina interna en un hospital de segundo nivel en México. Los investigadores utilizaron ChatGPT-3.5 en modo académico para generar dos cuestionarios de opción múltiple sobre tos ferina y fiebre manchada de las Montañas Rocosas. Posteriormente, tres médicos revisaron las preguntas creadas por la IA, seleccionando las más adecuadas antes de aplicarlas a los participantes.
Los residentes obtuvieron calificaciones promedio de 8.46 en el examen de tos ferina y 8.29 en el de fiebre manchada. Además, el 100% de los participantes consideró que las preguntas estaban bien redactadas y el 97% opinó que el lenguaje era claro y fácil de entender. No obstante, la mayoría, el 94%, calificó los reactivos como difíciles, lo que sugiere que ChatGPT puede elaborar preguntas que representen un reto académico similar al de los exámenes tradicionales.
De acuerdo con los autores, esta experiencia demuestra que los grandes modelos de lenguaje o LLM pueden apoyar las tareas de enseñanza en hospitales, especialmente en la generación de exámenes o materiales educativos, siempre bajo supervisión docente. Sin embargo, advierten que su uso debe complementarse con la revisión humana, ya que aún existen riesgos de errores o descontextualización en las respuestas generadas por IA.
Los investigadores concluyen que la incorporación de IA en la educación médica no debe ser vista como una amenaza, sino como una oportunidad para optimizar el aprendizaje y aliviar la carga administrativa del personal académico. Proponen fomentar la alfabetización digital entre docentes y estudiantes para integrar de forma responsable herramientas como ChatGPT en los programas de residencia y formación clínica.
