Global · IA · IA física · Mistral · Modelos · Robótica
Robostral Navigate guía robots con una sola cámara RGB
Mistral presenta un modelo de navegación que interpreta imágenes e instrucciones escritas.
Fecha de la fuente original:
Lo esencial
- La evaluación comunicada utiliza entornos de navegación reservados fuera del entrenamiento.
Navegación mediante puntos visuales
Robostral Navigate es un modelo de 8.000 millones de parámetros que combina la imagen de una cámara RGB con órdenes en lenguaje natural. Predice destinos dentro de la imagen y la orientación deseada; recurre a desplazamientos locales cuando el objetivo queda fuera del campo visual.
Simulación y demostración física
Mistral afirma haberlo entrenado en simulación con unos 2,4 millones de recorridos y 350.000 escenas. Reporta 76,6% de éxito en la partición de entornos no vistos de R2R-CE y muestra una demostración en una oficina. El anuncio dirige a interesados al equipo comercial, sin publicar una descarga de pesos.