Une nouvelle étude analyse l’intelligence des assistants vocaux
Une nouvelle étude sur les assistants vocaux a testé la capacité d' Amazon Alexa, de Google Assistant et de Siri à aider à satisfaire les requêtes des gens – et les résultats ne sont pas brillants.
Le groupe Nielsen Norman (NNG) a effectué un test approfondi – quoique moins que scientifique – mesurant non seulement la réponse, mais aussi les attentes des utilisateurs. Il a réuni 17 participants de New York et de San Francisco, qui étaient tous des utilisateurs expérimentés d'assistants vocaux, et les a placés dans un laboratoire pour effectuer un certain nombre de tâches d'enceintes intelligentes, et les a interrogés sur leurs attentes et la qualité des résultats.
Bien qu'il ait évalué la saisie vocale comme une bonne expérience pour les utilisateurs et noté que la prise en charge des accents s'améliorait, il a qualifié la plupart des autres éléments de "mauvais". Ceux-ci incluent l'utilisation du langage naturel, la sortie vocale des assistants vocaux et la possibilité d'exploiter services aux utilisateurs (calendriers, e-mails, listes de tâches) et en tirer des informations utiles.
L'étude a révélé que le langage naturel était l'un des plus grands obstacles, les assistants vocaux étant régulièrement déclenchés par des phrases aux causes multiples :
"La majorité des participants ont estimé que des phrases complexes à plusieurs clauses (telles que" À quelle heure dois-je partir pour Moss Beach samedi si je veux éviter le trafic?" ou "Trouvez le statut d'un vol de Londres à Vancouver qui part à 16h55 aujourd'hui ») étaient peu susceptibles d'être compris par les assistants », lit-on dans l'étude.
Maîtriser la langue était un thème de l'étude et les compétences d'Alexa ont été critiquées par les participants. Exiger que les utilisateurs se souviennent du nom exact d'une compétence donnée était une critique majeure, ainsi que les exigences spécifiques des commandes de phrasé.
« La majorité des utilisateurs d'Alexa ne savaient pas ce qu'étaient les compétences ; certains les avaient rencontrés auparavant, en avaient installé un ou deux, puis avaient complètement oublié leur existence.
Bien que l'enquête NNG soit loin d'être scientifique et ne génère pas vraiment de conclusions claires ou significatives, il est rafraîchissant pour une étude de valoriser les attentes des utilisateurs. Les tests d'assistant vocal signifient généralement répéter les mêmes questions aux orateurs, mais cela est mieux conçu pour être une évaluation franche des défis auxquels sont confrontés Amazon, Google et Apple pour produire un véritable assistant numérique.