Cимуляция VirtualHome научила агентов ИИ управляться с домашними делами

Группа исследователей из MIT и университета Торонто разработала виртуальную систему VirtualHome. Симуляция представляет собой квартиру, созданную для обучения агентов ИИ работе по дому и отработке таких навыков. По словам разработчиков, благодаря этому проекту однажды роботы научатся выполнять домашние поручения для человека:

Как проходило обучение VirtualHome?

Авторы технологии собрали данные о работе по дому, озвученные естественным языком, например, «сварить кофе», «накрыть стол» или «сделать тосты». На основе собранной информации они создали около 3000 различных действий. Затем разбили их на подзадачи, которые проще воспринимаются компьютером. Исследователи утверждают, что сделали это для более простой и понятной формулировки алгоритма действий.

Алгоритм был загружен в симуляцию, которая интерпретировала действия в видео в Sims-подобном стиле. Далее агент ИИ учился выполнять действия, заданные либо текстом, либо видео.

Что дальше?

Исследователи считают, что их система — не просто симуляция выполнения домашних дел, а полноценная база поручений, описанных естественным языком. Разработчики персональных виртуальных ассистентов могут использовать эту базу для выполнения более сложных заданий. VirtualHome позволит роботам учиться с помощью голосовых команд и визуального представления заданного действия.

В будущем команда планирует улучшить технологию для обучения через «живые» видео, например, ролики с YouTube. Также исследователи работают над системой поощрений для агентов за успешно выполненные задания.

Эксперименты по созданию более «человечных» ИИ проводятся многими технологическими компаниями. OpenAI научила агентов ИИ вести между собой дебаты, а Microsoft позволила ботам поддерживать живую беседу с человеком.