El nuevo laboratorio de investigación en robótica de Nvidia ha creado el “manipulador móvil”, un brazo robótico con ruedas que utiliza protocolos de aprendizaje profundo para ayudarte en la cocina. Si bien carece del elemento nuclear del mayordomo flotante de Fallout , el Mr. Manipulator de Nvidia (como se conocerá a partir de ahora solo para mí) tiene la capacidad de abrir y cerrar los cajones de la cocina, mover objetos, ayudarlo a cocinar e incluso limpiar un comedor.

“Realmente sentimos que es el momento adecuado para desarrollar la próxima generación de robots”, dice Dieter Fox, líder de laboratorio, comenta. “Al reunir los avances recientes en percepción, control, aprendizaje y simulación, podemos ayudar a la comunidad de investigación a resolver algunos de los mayores desafíos del mundo”.

Creo que cuando Fox se refiere a los “mayores desafíos del mundo”, no quiere decir cómo hacer una tarta de manzana decente. Pero si bien el equipo de investigadores tiene en mente grandes empresas para su sensacional Segway, pensaron que era mejor hacerle una prueba a su compañero doméstico en la cocina antes de desentenderse de asuntos más complejos.

En un evento de puertas abiertas el 11 de enero (a través de Designboom), el laboratorio demostró cómo su robot robot doméstico puede operar en el mundo real utilizando el seguimiento ambiental en tiempo real impulsado por las GPU de Nvidia . Específicamente, Mr. Manipulator viene equipado con la plataforma Jetson de Nvidia para la navegación y múltiples GPU de Nvidia Titan para las tareas de inferencia necesarias para la manipulación.

El sistema de percepción de aprendizaje profundo fue entrenado utilizando el marco de aprendizaje profundo PyTorch acelerado por cuDNN. Aquí hay un video del robot de Nvidia en acción:

Uno de los objetivos del laboratorio es crear sistemas robóticos totalmente integrados a partir de proyectos independientes. Como tal, también hay un montón de tecnologías subyacentes reunidas dentro del robot.

Se incluyen sistemas para realizar un seguimiento del entorno de un robot, detectar la orientación de los objetos, implementar bibliotecas de acciones simples y complejas, y utilizar herramientas de simulación fotorrealista para entrenar al robot sin que rompa todo, o sí mismo, en el proceso.

Entonces, mientras que Mr. Manipulator no está del todo al nivel de los autómatas nucleares, completamente equipado con sierras y acentos fantásticamente elegantes, estamos un paso más cerca de vivir el sueño descarado de robot-mayordomo. Y esperamos llegar allí sin que ocurran eventos nucleares catastróficos en el medio, también.