Aplicación del ChatGPT al estudio de los índices de las pruebas diagnósticas de Bioquímica Analítica y Clínica

Enfoque

Introducción.- Las definiciones verdadero positivo (VP), verdadero negativo (VN), falso positivo (FP) y falso negativo (FN) resultan difíciles de entender para los alumnos de Bioquímica Analítica y Clínica. Dada una prueba para una determinada enfermedad, si la capacidad diagnóstica no es del 100%, se observa que si la prueba da positiva define a los individuos que son realmente enfermos (VP) pero también a los que no están enfermos (FP). Si la prueba da negativa, se referirá a los individuos que no están enfermos (VN) pero también a algunos que están enfermos (FN). Entre los índices que relacionan estos valores, los más conocidos son sensibilidad y especificidad diagnósticas. La sensibilidad diagnóstica (SD) es la tasa de verdaderos positivos y la especificidad diagnóstica (ED) la tasa de verdaderos negativos.

Objetivos.-Los objetivos de este trabajo consistieron en analizar si los estudiantes podían aprender las anteriores definiciones utilizando el ChatGPT 3.5; así como sus relaciones, y en particular las de SD y ED.

Metodología.- Se consultó a ChatGPT 3.5 referente a las definiciones sobre los individuos que eran falsamente diagnosticados (FP y FN), así como los individuos bien diagnosticados (VP y VN) y se le realizaron un conjunto de preguntas relacionadas con estas definiciones. De igual modo se preguntó sobre la sensibilidad y la especificidad diagnósticas.

Resultados.- A pesar de que ChatGPT inicialmente respondía correctamente la mayoría de estas definiciones, no poseía una seguridad absoluta. Se confundía fácilmente al preguntarle si estaba seguro o al preguntar si lo que estaba definiendo no era otra de las definiciones que se presentan en la Introducción. Logramos que ChatGPT se excusara y se confundiera, con lo que es posible que los alumnos tampoco comprendan estas definiciones al usar esta metodología. Además, en algún caso nos proponía dos respuestas para que lo ayudáramos a evolucionar y a aprender sobre el tema. La experiencia se realizó en una clase de prácticas de ordenador, en la que participaron unos 10 alumnos, en la que consultaron las definiciones utilizando el ChatGPT, y solucionaron un problema sobre estas definiciones.

Conclusiones.- Las definiciones de VP, VN, FP, FN, SD y ED son muy conocidas y por eso eran contestadas correctamente por la inteligencia artificial. Pero hace falta que ChatGPT tenga más seguridad en las definiciones, pues en caso contrario puede llegar a confundir a los que le preguntan.