Учёные проверили искусственный интеллект на адекватность

Исследователи из Института Пола Аллена (AI2) разработали тест под названием AI2 Reasoning Challenge (ARC). С его помощью можно проверить искусственный интеллект на понимание явлений окружающего мира.

В тест вошли вопросы уровня начальной школы, относящиеся к категории общих знаний. Например, ИИ предлагалось определить, какой предмет сделан из искусственного материала, — хлопковая рубашка, деревянный стул, пластиковая ложка или плетёная корзинка.

Прохождение этого теста означает, что проверяемая система обладает здравомыслием. Однако на момент написания статьи не найдено искусственного интеллекта, завершившего тестирование успешно.

Здравый смысл

Виртуальные помощники и чат-боты основывают свои ответы на конкретных ситуациях, с которыми они сталкивались в процессе обучения, а не на общих знаниях предметной области. Питер Кларк (Peter Clark), ведущий исследователь ARC, полагает, что людям приходится использовать здравый смысл, чтобы сформировать картину окружающего нас мира. Человек видит неочевидный смысл фраз и поэтому имеет полное понимание текста.

Машины не обладают здравомыслием и, следовательно, видят только то, что явно написано, из-за чего пропускают множество выводов и предположений, лежащих в основе текста.

Учёные надеются, что созданный ими тест подтолкнёт разработчиков к улучшению алгоритмов вопросно-ответной системы и распространению ИИ во все сферы человеческой деятельности.

Крупные компании уделяют всё больше внимания «очеловечиванию» искусственного интеллекта. Напомним, в январе 2018 года Microsoft представила ИИ, умеющий осознанно читать и отвечать на вопросы.