Nuevo estudio analiza la inteligencia de los asistentes de voz
Un nuevo estudio de asistentes de voz ha probado la capacidad de Amazon Alexa, Google Assistant y Siri para ayudar a satisfacer las consultas de las personas, y los resultados no son brillantes.
Nielsen Norman Group (NNG) ha realizado una prueba exhaustiva, aunque no científica, para medir no solo la respuesta, sino también las expectativas de los usuarios. Reunió a 17 participantes de Nueva York y San Francisco, todos usuarios experimentados de asistentes de voz, y los puso en un laboratorio para realizar una serie de tareas de altavoces inteligentes, y los entrevistó sobre sus expectativas y la calidad de los resultados.
Si bien calificó la entrada de voz como una buena experiencia para los usuarios y señaló que la compatibilidad con los acentos estaba mejorando, calificó la mayoría de los demás elementos como "malos". Entre ellos se incluyen el uso del lenguaje natural, la salida de voz de los asistentes de voz y la capacidad de acceder a servicios de los usuarios (calendarios, correo electrónico, listas de tareas) y extraer información útil.
El estudio encontró que el lenguaje natural era una de las mayores barreras, ya que los asistentes de voz se tropezaban regularmente con oraciones por múltiples causas:
“La mayoría de los participantes sintieron que las oraciones complejas con varias cláusulas (como “¿A qué hora debo salir para Moss Beach el sábado si quiero evitar el tráfico?" o “Buscar el estado del vuelo de un vuelo de Londres a Vancouver que sale a las 4:55 p. m. de hoy”) era poco probable que los asistentes los entendieran”, se lee en el estudio.
Conseguir el idioma correcto fue un tema del estudio y las habilidades de Alexa fueron criticadas por los participantes. Requerir que los usuarios recuerden el nombre exacto de una habilidad determinada fue una de las principales críticas, y los requisitos específicos de los comandos de redacción.
“La mayoría de los usuarios de Alexa no sabían qué eran las habilidades; algunos los habían encontrado antes, instalaron uno o dos y luego se olvidaron por completo de su existencia”.
Si bien la encuesta NNG está lejos de ser científica y en realidad no genera conclusiones claras o significativas, es refrescante que un estudio valore las expectativas de los usuarios. Las pruebas de asistente de voz generalmente significan repetir las mismas preguntas a los oradores, pero esto está mejor diseñado para ser una evaluación franca de los desafíos que enfrentan empresas como Amazon, Google y Apple para producir un verdadero asistente digital.