PyE
Karan Singhal, investigador de Google y autor principal del nuevo estudio, dijo a la AFP que el equipo utilizó el punto de referencia para probar una versión más nueva de su modelo con resultados «súper emocionantes».
Med-PaLM 2 alcanzó el 86,5 por ciento en el examen USMLE, superando a la versión anterior en casi un 20 por ciento, según un estudio preliminar publicado en mayo que no ha sido revisado por pares.
«ELEFANTE EN EL CUARTO»
James Davenport, científico informático de la Universidad de Bath del Reino Unido que no participó en la investigación, dijo que «hay un elefante en la habitación» para estos chatbots médicos impulsados por IA.
Hay una gran diferencia entre responder «preguntas médicas y medicina real», lo que incluye diagnosticar y tratar problemas de salud genuinos», dijo.
Anthony Cohn, un experto en IA de la Universidad de Leeds del Reino Unido, dijo que las alucinaciones probablemente siempre serían un problema para modelos de lenguaje tan grandes, debido a su naturaleza estadística.
Por lo tanto, estos modelos «siempre deben considerarse como asistentes en lugar de los que toman las decisiones finales», dijo Cohn.
Singhal dijo que, en el futuro, Med-PaLM podría usarse para ayudar a los médicos a ofrecer alternativas que de otra manera no se habrían considerado.
The Wall Street Journal informó a principios de esta semana que Med-PaLM 2 ha estado en pruebas en el prestigioso hospital de investigación de la Clínica Mayo de EE. UU. desde abril.
Singhal dijo que no podía hablar sobre asociaciones específicas.
Pero enfatizó que cualquier prueba no sería «clínica, o dirigida al paciente, o capaz de causar daño a los pacientes».
En cambio, sería para «más tareas administrativas que pueden automatizarse con relativa facilidad, con poco riesgo», agregó.
