Guía de concordancia de recomendaciones antibióticas de modelos de lenguaje en odontología: una evaluación basada en viñetas en georgiano e inglés

Qué problema aborda

El uso inapropiado de antibióticos en odontología es un problema reconocido en la gestión de la salud. Aunque los modelos de lenguaje grandes (LLMs) son fuentes accesibles de información sobre prescripción, la mayoría de las evaluaciones se han realizado en inglés, dejando un vacío en el contexto georgiano, donde no existen guías nacionales de prescripción antibiótica dental.

Qué hicieron los autores

Los autores llevaron a cabo un estudio de viñetas preregistrado en el que se presentaron 20 escenarios estandarizados (10 indicativos de antibióticos y 10 no) en georgiano e inglés a las interfaces gratuitas de los modelos Claude, ChatGPT y Gemini. Se analizaron 360 respuestas, que fueron normalizadas y codificadas por dos dentistas en función de las guías del Scottish Dental Clinical Effectiveness Programme, la American Dental Association y la American Heart Association.

Qué encontraron

Los resultados mostraron una concordancia total del 95% en inglés (57 de 60) frente al 76.7% en georgiano (46 de 60), con una diferencia significativa del 18.3% (p = 0.003). Aunque las decisiones de prescripción fueron concordantes en todas las respuestas, la elección del agente antibiótico fue más baja en georgiano, donde se aceptó el agente de primera elección en 21 de 30 casos, en comparación con 30 de 30 en inglés. Además, la concordancia en dosis y duración también fue menor en georgiano.

Limitaciones

El texto no detalla limitaciones específicas del estudio, pero es importante considerar que la evaluación se realizó en un contexto sin guías nacionales de prescripción, lo que podría influir en la precisión de las recomendaciones.

Lectura final

Este estudio resalta la importancia de verificar las recomendaciones generadas por modelos de lenguaje contra fuentes autorizadas, especialmente en contextos donde la información puede ser menos accesible. La necesidad de guías de prescripción dental en georgiano es evidente, lo que podría mejorar la calidad de la atención odontológica en ese idioma.