Роботы учатся домашним делам по видео

Как бы вы отнеслись к тому, чтобы робот помогал вам с готовкой и уборкой? Это может стать реальностью благодаря новому методу обучения роботов, разработанному исследователями из Карнеги-Меллонского университета. Они научили роботов выполнять различные домашние задачи, просто показывая им видео, на которых люди делают то же самое в своих домах.

Метод называется Vision-Robotics Bridge (VRB) и основан на концепции аффордансов. Аффордансы - это возможности взаимодействия с объектами, которые определяются поведением человека. Например, когда робот видит, как человек открывает ящик за ручку, он понимает, что это способ взаимодействия с ящиком. Таким образом, робот может обобщить свой опыт и открывать любые ящики.

Два робота успешно освоили 12 домашних задач, таких как открытие дверцы духовки, снятие кастрюли с плиты или поднятие телефона. “Робот может узнать, где и как люди взаимодействуют с разными объектами, наблюдая за видео”, - сказал Дипак Патак, доцент института робототехники Карнеги-Меллонского университета.

Более подробная информация доступна на веб-сайте проекта и в документе , представленном в июне на конференции по распознаванию зрения и образов.