AutoRT: un sistema para desplegar robots en escenarios desconocidos

¿Te acuerdas de WALL•E? ¿Te imaginas un mundo en el que los robots puedan aprender de forma autónoma a realizar tareas útiles para los humanos?

Ese es el objetivo de AutoRT, un sistema que combina modelos de inteligencia artificial de gran escala con robots que pueden explorar y actuar en entornos no estructurados.

AutoRT utiliza modelos de lenguaje visual (VLM) para describir lo que el robot ve, y modelos de lenguaje de gran tamaño (LLM) para generar instrucciones en lenguaje natural que el robot puede intentar seguir. Además, AutoRT usa otro LLM para filtrar las instrucciones según un criterio de seguridad y factibilidad, que llamamos constitución robótica.

De esta forma, AutoRT puede desplegar robots en escenarios desconocidos, donde no se sabe de antemano qué objetos o situaciones se van a encontrar, y recoger datos sobre las tareas que se generan. Estos datos pueden servir para entrenar mejores modelos de control robótico, que puedan entender los objetivos prácticos de los humanos.

AutoRT se ha probado con más de 20 robots en varios edificios, recogiendo más de 77 mil episodios de robot reales, tanto mediante teleoperación como mediante políticas autónomas de robot. Los resultados muestran que los datos recogidos por AutoRT son más diversos y que el uso de LLM permite generar instrucciones que se alinean con las preferencias humanas.

AutoRT es una exploración de cómo escalar el aprendizaje robótico a entornos reales y complejos. Es un proyecto de Google DeepMind, una empresa líder en el campo de la inteligencia artificial, que busca crear agentes artificiales que puedan aprender de cualquier tipo de experiencia y mejorar el mundo.

AutoRT, con su capacidad para desplegar robots en entornos desconocidos con mínima supervisión humana, tiene un amplio rango de aplicaciones potenciales. Aquí te menciono algunas:

1. Automatización Industrial: AutoRT podría ser utilizado en la automatización de procesos industriales, donde los robots podrían realizar tareas complejas y variadas en entornos de producción.

2. Exploración Espacial: En misiones espaciales, donde el entorno es completamente desconocido y hostil, AutoRT podría desplegar robots para explorar y recoger datos.

3. Asistencia Doméstica: Los robots equipados con AutoRT podrían ayudar en las tareas domésticas, adaptándose a los entornos cambiantes de una casa.

4. Rescate y Recuperación: En situaciones de desastre, donde puede ser peligroso para los humanos entrar, los robots con AutoRT podrían ser desplegados para buscar sobrevivientes o evaluar los daños.

5. Agricultura: AutoRT podría ser utilizado para automatizar tareas agrícolas, como la siembra, el cuidado de los cultivos y la cosecha.

Estas son solo algunas de las muchas aplicaciones potenciales de AutoRT. Su capacidad para adaptarse a entornos desconocidos y realizar tareas con mínima supervisión humana lo hace extremadamente versátil.

Si quieres saber más sobre AutoRT, puedes visitar su página web¹ o leer el artículo científico que lo presenta².