Uusi tutkimus panostaa puheavustajien älykkyyteen
Uusi ääniassistenttien tutkimus on testannut Amazon Alexan, Google Assistantin ja Sirin kykyä vastata ihmisten kyselyihin – ja tulokset eivät ole loistavia.
Nielsen Norman Group (NNG) on suorittanut laajan – joskin vähemmän kuin tieteellisen – testin, joka mittaa paitsi vastausta myös käyttäjien odotuksia. Se kokosi yhteen 17 osallistujaa New Yorkista ja San Franciscosta, jotka kaikki olivat kokeneita ääniassistenttien käyttäjiä, ja laittoi heidät laboratorioon suorittamaan useita älykaiutintehtäviä ja haastatteli heitä heidän odotuksistaan ja tulosten laadusta.
Vaikka se arvioi puhesyötteen hyväksi kokemukseksi käyttäjille ja huomautti, että aksenttien tuki oli parantumassa, se arvioi useimmat muut elementit "huonoksi". Näitä ovat muun muassa luonnollisen kielen käyttö, ääniavustajien äänilähtö ja kyky hyödyntää käyttäjien palvelut (kalenterit, sähköpostit, tehtävälistat) ja vedä esiin hyödyllisiä tietoja.
Tutkimuksessa havaittiin, että luonnollinen kieli oli yksi suurimmista esteistä, sillä puheavustajat kompastuivat säännöllisesti useista syistä johtuviin lauseisiin:
"Suurin osa osallistujista tunsi monimutkaiset, monilauseiset lauseet (kuten "Mihin aikaan minun pitäisi lähteä Moss Beachille lauantaina, jos haluan välttää liikennettä?" tai "Etsi lennon tila Lontoosta Vancouveriin, joka lähtee klo. 16:55 tänään"), avustajat eivät todennäköisesti ymmärtäneet, tutkimuksessa sanotaan.
Kielen omaksuminen oli tutkimuksen teema ja Alexan taidot joutuivat osallistujien tulen kohteeksi. Yksi suuri kritiikki oli se, että käyttäjiltä vaadittiin muistamaan tietyn taidon tarkka nimi, ja sanamuotokomentojen erityisvaatimukset.
“Suurin osa Alexan käyttäjistä ei tiennyt, mitä taidot ovat; Jotkut olivat kohdanneet ne aiemmin, asentaneet yhden tai kaksi ja sitten unohtaneet kokonaan niiden olemassaolon."
Vaikka NNG-tutkimus on kaukana tieteellisestä, eikä se todellakaan tuota selkeitä tai merkityksellisiä johtopäätöksiä, on virkistävää, että tutkimus antaa arvoa käyttäjien odotuksille. Ääniavustajatestit tarkoittavat yleensä samojen kysymysten esittämistä kaiuttimissa, mutta tämä on parempi suunniteltu suoraksi arvioksi haasteista, joita Amazonin, Googlen ja Applen kaltaiset kohtaavat todellisen digitaalisen avustajan tuottamiseksi.