Accesibilidad · Global · IA · IA física · Meta · Pittsburgh · Robótica
Un prototipo de robótica asistiva combina SAM y DINO para reconocer su entorno
RAMMP integra percepción visual y comandos sobre objetos en una plataforma de movilidad y manipulación.
Fecha de la fuente original:
Lo esencial
- Descripción pública del primer prototipo RAMMP y de funciones listas para pruebas reales, sin atribuir resultados clínicos.
Percepción visual en el primer prototipo
Meta detalló cómo los laboratorios HERL de la Universidad de Pittsburgh y ATDev incorporan visión artificial al prototipo RAMMP. El sistema emplea RF-DETR ajustado con representaciones DINOv2, mientras SAM ayuda a etiquetar datos de entrenamiento para detectar objetos desde distintas posiciones y condiciones de iluminación.
De los modelos al dispositivo con batería
Según el anuncio, las funciones para reconocer botones de puertas, tazas y bordillos estaban listas para pruebas en entornos reales. El equipo trabaja en entradas de voz y tacto, además de adaptar los modelos a hardware con batería, restricciones térmicas y conexión irregular. La integración posterior de SAM 3.1 y DINOv3 figura entre los próximos pasos.