Introducción
Generalist AI presentó el modelo GEN-1.5, cuyo objetivo es que los robots aprendan nuevas tareas físicas a partir de una sola demostración. El modelo puede ejecutar demostraciones de entre 3 y 12 segundos junto con datos de sensores, vídeo, lenguaje, posición y movimiento, sin ajuste fino ni actualización de gradientes. GEN-1.5, que utiliza una ventana de contexto de 30 segundos, genera 100 comandos de movimiento por segundo.
Avances
GEN-1.5 logró una tasa media de éxito del 59% en 10 tareas de manipulación de corta duración con una sola demostración. Con cinco minutos de datos, que incluían aproximadamente 50 demostraciones por tarea, y 10 pasos de gradiente, esta tasa aumentó al 83%.
Detalles
Con un minuto de datos y un único paso de gradiente, se midió una tasa de éxito del 66,5%.
El modelo puede combinar diferentes demostraciones para crear secuencias de tareas largas, desarrollar por sí mismo los movimientos intermedios y transferir demostraciones de la simulación al robot real sin ejemplos previos. Se indicó que algunas de las capacidades de aprendizaje dentro del contexto y de improvisación del modelo, cuyo preentrenamiento continúa desde hace más de ocho meses, surgieron espontáneamente durante este proceso.