La mejor guía sobre IA en el aula la escribió una facultad de información
De las cuatro fuentes, esta es la única que viene de una Facultad de Inforamción. Una de sus autoras, Marina Salse, enseña en el grado de Gestión de Información y Documentación Digital y es diplomada en Biblioteconomía.
Eso cambia dónde ponen el foco.
Lo principal es que las otras guías explican cómo usar la herramienta. Mientras esta empieza explicando qué devuelve, no información verificada, sino texto armado por probabilidad de palabras. La fuente detalla que el modelo no razona ni tiene un modelo de verdad. Agregando así que la precisión media de ChatGPT es del 63,41% en diez tipos de razonamiento (Bang et al.,2023). Es decir, casi cuatro de cada diez respuestas fallan.
Lo que la hace bibliotecología es que sus ejercicios para el área de Gestión de Información no son genéricos:
Pedirle a la IA el resumen de un artículo y decidir si está bien
Diseñar un esquema de metadatos para las fotos de un archivo
Buscar referencias para armar una guía de consulta de una biblioteca pública, elegir dos y justificar para qué usuarios sirven
Visitar una biblioteca y hacer un DAFO comparándola con la teoría
En todos, la IA es lo que se evalúa, no lo que da la respuesta.
Un detalle importante a destacar, es que la guía propone una rúbrica para detectar trabajos hechos con IA, y uno de los indicadores es:
¿el trabajo incluye referencias bibliográficas falsas?
Ese indicador ningún programa lo revisa. Por lo que para saber si una cita existe hay que buscarla en un catálogo. Eso es lo que hace un bibliotecólogo.
Asimismo, lo que me llamó la atención de la guía incluye una tabla con nueve detectores de texto generado por IA, pero al lado advierte que su fiabilidad es limitada y que conviene probar dos o tres y comparar. Ese aviso es la diferencia con la guía del próximo post.
REFERENCIAS BIBLIOGRÁFICAS:
Franganillo, J., Lopezosa, C. y Salse, M. (2023). La inteligencia artificial generativa en la docencia universitaria. Universitat de Barcelona. http://hdl.handle.net/2445/202932
Bang, Y., Cahyawijaya, S., Lee, N., Dai, W., Su, D., Wilie, B., Lovenia, H., Ji, Z., Yu, T., Chung, W., Do, Q.V., Xu, Y., Fung, P. (2023). A multitask, multilingual, multimodal evaluation of ChatGPT on reasoning, hallucination, and interactivity. arXiv preprint. https://arxiv.org/abs/2302.04023