Ciencia · IA · Modelos · Universidad de Auckland · GPT-4o · Claude · Gemini
Un estudio publicado en Nature compara la visión de tres modelos con pruebas humanas
La investigación de Auckland documenta fortalezas en reconocimiento de objetos y dificultades en relaciones visuales básicas.
Fecha de la fuente original:
Lo esencial
- La investigación de Auckland documenta fortalezas en reconocimiento de objetos y dificultades en relaciones visuales básicas.
- Las pruebas se realizaron con modelos de 2024; no describen el rendimiento de generaciones posteriores.
Reconocimiento y percepción básica
Nature Machine Intelligence publicó el 6 de febrero un estudio de la Universidad de Auckland que evaluó GPT-4o, Claude 3.5 Sonnet y Gemini 1.5 Pro mediante 51 pruebas de percepción visual. Los autores encontraron buen reconocimiento de objetos sencillos, pero dificultades al comparar orientación y tamaño o interpretar figuras superpuestas.
Versiones y pruebas de 2024
El trabajo ya circulaba como preprint desde abril de 2025 y las pruebas corresponden a versiones evaluadas entre agosto y noviembre de 2024. Comparó los modelos con datos normativos humanos y una muestra adicional de adultos. Los autores mantuvieron instrucciones fijas, por lo que otros formatos de consulta podrían modificar el rendimiento. No es una evaluación de las versiones lanzadas en 2026.