Novo estudo analisa a inteligência dos assistentes de voz
Um novo estudo de assistentes de voz testou a capacidade do Amazon Alexa, Google Assistant e Siri para ajudar a satisfazer as dúvidas das pessoas – e os resultados não são brilhantes.
O Nielsen Norman Group (NNG) realizou um extenso – embora menos do que um teste científico – medindo não apenas a resposta, mas também as expectativas dos usuários. Ele reuniu 17 participantes de Nova York e São Francisco, todos usuários experientes de assistentes de voz, e os colocou em um laboratório para realizar uma série de tarefas de alto-falante inteligente, e os entrevistou sobre suas expectativas e qualidade dos resultados.
Embora tenha classificado a entrada de voz como uma boa experiência para os usuários e notado que o suporte para sotaques estava melhorando, classificou a maioria dos outros elementos como "ruins". Isso inclui o uso de linguagem natural, a saída de voz de assistentes de voz e a capacidade de acessar serviços dos usuários (calendários, e-mail, listas de tarefas) e extrair informações úteis.
O estudo descobriu que a linguagem natural era uma das maiores barreiras, com assistentes de voz regularmente tropeçando em frases com várias causas:
“A maioria dos participantes sentiu que frases complexas e com várias cláusulas (como “Que horas devo partir para Moss Beach no sábado se quiser evitar o trânsito?" ou “Encontrar o status de um voo de Londres para Vancouver que sai às 16h55 de hoje”) dificilmente seriam compreendidos pelos assistentes”, diz o estudo.
Acertar o idioma foi um tema do estudo e as habilidades de Alexa foram criticadas pelos participantes. Exigir que os usuários lembrem o nome exato de uma determinada habilidade foi uma crítica importante e os requisitos específicos de comandos de frase.
“A maioria dos usuários do Alexa não sabia o que eram habilidades; alguns os encontraram antes, instalaram um ou dois e depois se esqueceram completamente de sua existência.
Embora a pesquisa da NNG esteja longe de ser científica e realmente não gere nenhuma conclusão clara ou significativa, é revigorante para um estudo valorizar as expectativas dos usuários. Os testes de assistente de voz geralmente significam repetir as mesmas perguntas nos alto-falantes, mas isso é melhor projetado para ser uma avaliação franca dos desafios enfrentados por empresas como Amazon, Google e Apple para produzir um verdadeiro assistente digital.