Новое исследование анализирует интеллект голосовых помощников
Новое исследование голосовых помощников проверило способность Amazon Alexa, Google Assistant и Siri помочь удовлетворить запросы людей — и результаты не блестящие.
Nielsen Norman Group (NNG) провела обширный — если не научный тест — измерение не только реакции, но и ожиданий пользователей. В нем приняли участие 17 участников из Нью-Йорка и Сан-Франциско, все из которых были опытными пользователями голосовых помощников, и поместили их в лабораторию для выполнения ряда задач с умными динамиками, а также опросили их об их ожиданиях и качестве результатов.
В то время как голосовой ввод оценивается как хороший для пользователей и отмечается улучшение поддержки акцентов, он оценивает большинство других элементов как «плохие». К ним относятся использование естественного языка, голосовой вывод голосовых помощников и возможность использовать сервисы пользователей (календари, электронная почта, списки дел) и извлекать полезную информацию.
Исследование показало, что естественный язык был одним из самых больших препятствий, поскольку голосовые помощники регулярно сбивались с толку предложениями по нескольким причинам:
«Большинство участников чувствовали, что сложные предложения, состоящие из нескольких предложений (например, «Во сколько мне следует вылететь в Мосс-Бич в субботу, если я хочу избежать пробок?» или «Найти статус рейса из Лондона в Ванкувер, который отправляется в 16:55 сегодня») вряд ли были поняты ассистентами», — говорится в исследовании.
Правильный язык был темой исследования, и участники подвергли критике навыки Алексы . Одной из основных критических замечаний было требование к пользователям помнить точное название данного навыка, а также особые требования к фразовым командам.
«Большинство пользователей Alexa не знали, что такое навыки; некоторые сталкивались с ними раньше, устанавливали одну или две, а потом и вовсе забывали об их существовании».
Хотя опрос NNG далек от научного и на самом деле не приводит к каким-либо четким или значимым выводам, для исследования полезно оценить ожидания пользователей. Тесты голосового помощника обычно подразумевают повторение одних и тех же вопросов говорящим, но это лучше предназначено для откровенной оценки проблем, с которыми сталкиваются такие компании, как Amazon, Google и Apple, при создании настоящего цифрового помощника.