Los estudiantes de farmacia ganan el cara a cara con la IA
Un estudio demostró que, en comparación con los estudiantes, ChatGPT 3.5 tenía menos probabilidades de responder correctamente a las preguntas de los exámenes de terapéutica centrados en aplicaciones clínicas y casos.
Los estudiantes que desean obtener el título de Doctor en farmacia suelen realizar -y aprobar- rigurosos exámenes para demostrar su competencia en diversas áreas. ¿Puede el ChatGPT responder con precisión a las mismas preguntas? Según un nuevo estudio realizado por investigadores de la Facultad de Farmacia R. Ken Coit de la Universidad de Arizona, no.
rian Erstad, PharmD, es decano interino y profesor de la Facultad de Farmacia R. Ken Coit.
Photo by Kris Hanning, U of A Office of Research and Partnerships
Los investigadores descubrieron que ChatGPT 3.5, una forma de inteligencia artificial, obtuvo peores resultados que los estudiantes de Farmacia a la hora de responder a las preguntas de los exámenes de terapéutica que garantizan que los estudiantes tienen los conocimientos, las habilidades y la capacidad de pensamiento crítico para proporcionar una atención segura, eficaz y centrada en el paciente.
ChatGPT tuvo menos probabilidades de responder correctamente a las preguntas basadas en la aplicación (44%) en comparación con las preguntas centradas en el recuerdo de hechos (80%). También fue menos probable que respondiera correctamente a preguntas basadas en casos (45%) en comparación con las preguntas que no se centraban en casos de pacientes (74%). En general, ChatGPT respondió correctamente sólo al 51% de las preguntas.
Los resultados proporcionan información adicional sobre los usos y limitaciones de la tecnología y también pueden resultar valiosos para el desarrollo de preguntas de exámenes de farmacia.
"La IA tiene muchos usos potenciales en la atención sanitaria y la educación, y no va a desaparecer", dijo Christopher Edwards, PharmD, profesor clínico asociado de práctica y ciencia farmacéuticas. "Una de las cosas que esperábamos responder con el estudio era si los estudiantes quisieran utilizar la IA en un examen, ¿cómo lo harían? Quería tener datos para mostrar a los estudiantes y decirles que pueden hacerlo bien en los exámenes estudiando mucho y que no necesitan necesariamente estas herramientas."
Un objetivo secundario era averiguar con qué tipo de preguntas tendría problemas la IA. Al decano interino de la Facultad de Farmacia Coit, Brian Erstad, PharmD, no le sorprendió que ChatGPT se desenvolviera mejor con preguntas sencillas de opción múltiple y verdadero-falso y tuviera menos éxito con preguntas basadas en la aplicación.
"En los casos en los que las pruebas son limitadas y se requiere juicio, como suele ocurrir en un entorno clínico, es donde encontramos que la tecnología es algo deficiente", dijo. "Irónicamente, ésas son las preguntas a las que siempre se enfrentan los médicos".
Edwards, Erstad y Bernadette Cornelison, PharmD, profesora asociada de práctica y ciencias farmacéuticas, evaluaron las respuestas a 210 preguntas de seis exámenes de dos cursos de farmacoterapéutica que forman parte del programa de PharmD de la Facultad de Farmacia Coit de la universidad.
Las preguntas procedían de un curso de PharmD de primer año centrado en trastornos relacionados con medicamentos sin receta para la acidez, la diarrea, la dermatitis atópica, el resfriado y las alergias. La otra clase era un curso de segundo año que abarcaba temas de cardiología, neurología y cuidados críticos.
Para comparar el rendimiento en los exámenes de los estudiantes de farmacia y ChatGPT, calcularon las puntuaciones medias compuestas como medida de la capacidad para responder correctamente a las preguntas. Para ChatGPT, sumaron las puntuaciones individuales de cada examen y las dividieron por el número de exámenes. Para calcular la puntuación media compuesta de los alumnos, dividieron la suma del rendimiento medio de la clase en cada examen por el número de exámenes. La puntuación media compuesta de los seis exámenes de ChatGPT fue de 53, frente a los 82 de los estudiantes de farmacia.
Docentes, clínicos y otras personas siguen debatiendo el valor de los modelos de lenguaje de gran tamaño con IA, como ChatGPT, en la medicina académica. Aunque estos modelos seguirán desempeñando una serie de funciones en la atención sanitaria, la práctica farmacéutica y otras áreas, a muchos les preocupa que depender demasiado de la tecnología pueda obstaculizar el desarrollo de las habilidades de razonamiento y pensamiento crítico necesarias en los estudiantes.
Tanto Erstad como Edwards reconocieron que, con el tiempo, una tecnología más nueva y avanzada podría cambiar estos resultados.
Nota: Este artículo ha sido traducido utilizando un sistema informático sin intervención humana. LUMITOS ofrece estas traducciones automáticas para presentar una gama más amplia de noticias de actualidad. Como este artículo ha sido traducido con traducción automática, es posible que contenga errores de vocabulario, sintaxis o gramática. El artículo original en Inglés se puede encontrar aquí.
Publicación original
Más noticias del departamento ciencias
