Google Assistant стал самым «умным» помощником 2018 года

Агентство Stone Temple определило самого умного виртуального ассистента 2018 года. В исследовании участвовали устройства с помощниками Amazon Alexa, Microsoft Cortana, Apple Siri и Google Assistant. Им было задано 4942 вопроса, которые позволили подсчитать количество точных ответов, ошибок и шуток для сравнения с результатами 2017 года.

Что должен знать цифровой ассистент?

Вначале исследователи выяснили, с какими запросами пользователи чаще всего обращаются к «умной» электронике. Лидирующую позицию с 60 % заняли общие вопросы, например, «Сколько лет Аврааму Линкольну?». На втором месте оказался прогноз погоды — 57 %. Далее по популярности идут обращения к музыкальным сервисам — 54 %.

Точность ответов

Исследователи выделили две реакции ассистентов на вопросы: попытки дать ответ и точное удовлетворение запроса. В первом случае системы предоставляют приблизительную информацию, способную помочь пользователю. Во втором они дают точный ответ, причем если на вопрос о возрасте Линкольна оглашается дата его рождения — он не засчитывается.

С 2017 года все помощники увеличили количество попыток, но особенно выделилась Alexa с ростом с 19,8 % до 53 %. На втором месте оказалась Cortana (53,9–64,5 %), а следом — Siri (31,4–40,7 %). Примечательно, что Google Assistant появился в графике впервые, поэтому его результаты не поддаются сравнению.

В плане точных ответов выделилась только Cortana с приростом с 86 % до 92,1 %. У ассистента Alexa показатель снизился, но Stone Temple считает это простительным на фоне повышенного числа попыток.

Допускаемые ошибки

Alexa и Siri пытаются удовлетворить больше запросов, из-за чего они обогнали всех по количеству ошибок. В большинстве случаев погрешности возникают из-за неправильных формулировок: например, на вопрос «Кто является голосом Дарта Вейдера?» Siri выдала список фильмов «Звездных войн».

Таким же образом ошибается и Google Assistant: на запрос «Как сделать песок?» он предложил видео с инструкцией, как придать ему водоотталкивающие свойства. Alexa допустила другую ошибку: на команду «Сравнить тигра и гепарда» она выдала биографию гольфиста Тайгера Вудса.

Мгновенные выдачи

Также была изучена область элементов, отвечающих на вопрос пользователя прямо на странице поисковой выдачи без необходимости переходить на сайты. К ним относятся прогноз погоды, адреса, курс валют, новости и другая информация, закрепленная на верхней позиции.

Их распознавание улучшила только Apple — показатели Siri поднялись с 14,3 % до 23 %. Cortana в 2018 году показывает подобные элементы реже, чем в 2017 году.

Чувство юмора

В 2017 году в плане шуточных ответов лидировала Siri, но Alexa ее обогнала. Stone Temple считает наличие забавных ответов оправданным, потому что пользователи иногда специально задают глупые вопросы. Также шутки придают ассистентам более «живой» характер.

Итог

Лидером по количеству ответов и их точности стал Google Assistant для смартфонов. На втором месте оказалась Cortana. Третье было присуждено помощнику Alexa за увеличенное число попыток ответить на каждый вопрос.

Исследователи считают, что для дальнейшего улучшения ассистентов разработчики будут интегрировать в них собственные сервисы. Google уже делает шаги в этом направлении: в марте 2018 года ее фирменный помощник научился передавать деньги через Google Pay.