Ayudar a los robots a enfocar y darle una mano
El sistema ayuda a los robots a centrarse en lo que importa, usar sonidos e imágenes para adivinar los objetivos humanos y ofrecer la ayuda correcta de manera rápida y segura.
Los robots encuentran el mundo real difícil de entender.MIT hizo un sistema llamado "relevancia" para ayudar a los robots a centrarse en lo que importa.Utiliza sonidos e imágenes para adivinar lo que una persona quiere y rápidamente ofrece ayuda.
El equipo lo probó con un buffet de desayuno.El robot, usando una cámara y un micrófono, entregó artículos de café a las personas mirando y escuchando.Adivinó los objetivos del 90% correcto, recogió los objetos correctos el 96% del tiempo y tenía un 60% menos de accidentes.
Encontrar enfoque
El equipo construyó un robot que funciona como el RAS del cerebro, ayudándolo a centrarse en cosas importantes e ignorar el resto.Primero, el robot observa y escucha el uso de una cámara y un micrófono, enviando lo que ve y escucha a una IA que encuentra personas, objetos, acciones y palabras clave.En segundo lugar, verifica si algo importante está sucediendo, como una persona que ingresa a la habitación.Si ve a una persona, comienza el tercer paso: el robot descubre lo que la persona quiere y encuentra los objetos correctos para ayudar, como recoger tazas y cremas en lugar de frutas y bocadillos.
Modo auxiliar
Los investigadores probaron su nuevo sistema con experimentos que simularon un buffet de desayuno con la conferencia.Eligieron esta configuración debido al conjunto de datos de acciones de desayuno disponibles públicamente, que incluye videos e imágenes que muestran actividades de desayuno comunes como hacer café, panqueques de cocina, cereales y huevos de freír.Cada video e imagen está etiquetado con la acción específica y el objetivo general, como "hacer café" o "huevos de freír".
Usando este conjunto de datos, el equipo entrenó y probó diferentes algoritmos en su kit de herramientas de IA para reconocer las acciones humanas, descubrir el objetivo de la persona e identificar los objetos necesarios para ayudar.En sus experimentos, establecieron un brazo robótico y una pinza, luego le pidieron al robot que ayudara a las personas mientras se acercaban a una mesa llena de bebidas, bocadillos y vajilla.Cuando nadie estaba cerca, la IA del robot funcionó silenciosamente en segundo plano, etiquetando y clasificando objetos en la mesa.Pero cuando se detectó un humano, el robot cambió inmediatamente a su fase de relevancia, encontrando rápidamente los objetos que mejor ayudarían a la persona en función de lo que la IA predijo su objetivo.
