Ciencia · IA · Modelos · Oxford · Evaluación · Salud
Un estudio de Oxford muestra la brecha entre responder exámenes y ayudar a usuarios
Nature Medicine publicó una evaluación con 1.298 adultos y diez escenarios médicos simulados.
Fecha de la fuente original:
Lo esencial
- Nature Medicine publicó una evaluación con 1.298 adultos y diez escenarios médicos simulados.
- El experimento usa casos de salud simulados y modelos de 2024; sus resultados se limitan a esas condiciones.
Una evaluación con personas
Nature Medicine publicó la versión revisada por pares de un estudio, difundido como preprint en 2025, dirigido desde Oxford que comparó a 1.298 adultos británicos al resolver diez escenarios médicos. Los participantes asistidos por GPT-4o, Llama 3 o Command R+ no mejoraron frente al grupo de control al decidir qué atención buscar y fueron menos precisos al identificar condiciones relevantes, según los autores.
Modelos y escenarios de 2024
El experimento se realizó entre agosto y octubre de 2024, con situaciones escritas y modelos de esa época. Los resultados distinguen el desempeño del modelo aislado de su interacción con personas; no evalúan los sistemas lanzados en 2026 ni pacientes ante una urgencia real.