Немецкие разработчики научили робота приносить холодное пиво

Немецкие разработчики научили робота-помощника TIAGo самостоятельно искать путь к холодильнику. Группа инженеров из Университета Кобленц-Ландау использовала Jetson TX2 в качестве зрительной системы робота TIAGo компании PAL Robotics.

Суперкомпьютер помог роботу не только эффективно выстроить маршрут до холодильника и найти ручку для того, чтобы его открыть, но и выбрать пиво запрошенной марки. Этого удалось добиться благодаря алгоритму семантической сегментации, который выделяет объекты (в данном случае — продукты в холодильнике) на общем фоне и классифицирует их по форме, выделяя нужные (пивные бутылки и банки). Для обучения хватило всего лишь 60 изображений бутылок на 20 различных фонах.

TIAGo смог правильно выбрать нужное пиво, а затем — принести и подать его одной из разработчиков. При этом робот смог захлопнуть дверцу холодильника, несмотря на то, что у него всего одна рука, занятая банкой пива.

Научить робота приносить определенные вещи (в том числе и пиво) — задача многих разработчиков. С этим может помочь, например, виртуальная система, которую придумали разработчики из Алленовского института искусственного интеллекта: она состоит из трехмерных комнат, повторяющих жилые помещения.