Peidetud häälsignaalid, mida teie nutikas kõlar võib kuulata
Kui olete kunagi otsustanud vaadata oma suhtlust hääleassistendiga, nagu Alexa või Google Assistant, märkate, et te ei näe (ja kustutage) oma käskude ja küsimuste transkriptsioone, vaid saate ka tegelikku häält esitada. salvestisi.
Seda on veider kogeda, kuulates tagasi lugusid, mida kuus kuud tagasi küsisite. Palju rohkem kui lihtsalt ärakirjade lugemine. Sel päeval tunnete end tõeliselt, võib-olla lihtsalt naersite koos oma perega ja see voolab sisse või tundub, et teie pealuu on igav.
Lugege seda: kuidas Amazon, Google ja Apple teie nutikõlarite andmeid kasutavad
See on alles algus, ütles MIT Media Labi Tuleviku ooperi grupi teadusassistendi Rébecca Kleinberger . Oma doktorikraadi saamiseks ühendab ta neuroloogia, füsioloogia, muusika, häälekoolituse ja muu alast uurimistööd, et vaadelda "alateadvuse vihjeid, mida me iga rääkimise ajal väljendame", kuidas saaksime inimesi oma häälest teadlikumaks muuta ja uusi kogemusi luua. hääl.
Kuue aasta jooksul meie hääli uurides on tema töö hõlmanud meie keha tekitatud füüsiliste vibratsioonide uurimist ja selle seost vibratsiooniteraapiaga; miks meile ei meeldi meie enda hääle kõla; kuidas me oma lihaseid helide tekitamiseks kaardistame (meie nn hääleasend); ja kuidas süvaõpet saab kasutada kõneleja reaalajas tuvastamiseks isegi mitut keelt kõnelevate inimeste puhul.
Kuna meie kodudes on levinud nutikõlarid, mis salvestavad meie häält iga kord, kui ütleme neid maagilisi äratussõnu, arvasime, et tasub uurida, mida me hääle kaudu inimestele ja masinatele edastame. Ja Kleinberger ütleb, et olenemata sellest, kas me mõistame seda või mitte, "Inimese aju on arenenud ülimalt hästi kõigi nende varjatud elementide analüüsimiseks häälest. Kui need on masinate abil tuvastatavad, tähendab see, et meie aju tuvastab need kuidagi teiste inimeste häälte järgi. ."
Ta soovitab mõelda nendele teadvuseta elementidele kui "hääle feromoonidele, peaaegu akustilistele feromoonidele, mis mõjutavad meid mitmel viisil, ilma et me sellest teadlikud oleksime".
Signaalid, mida teie hääl välja saadab
Kellega sa räägid
Meie hääl muutub olenevalt sellest, kellega me räägime ja kontekstist, nii palju, et teadlased ja nende algoritmid saavad aru, kas räägite oma ema, ülemuse või sõbraga. Nad võivad isegi tuvastada inimese vanuse, kellega räägite.
"Isegi kui proovite normaalselt rääkida, muutub teie hääl väikese lapsega rääkides," ütleb Kleinberger. "Prosoodia, musikaalsus, mida oma hääles kasutate, on väga erinev sellest, kui räägite täiskasvanutega."
Sinu tuju
Teame, et Amazoni Alexa meeskonnad suunavad juba praegu uuringuid hääleanalüüsile, mis suudab tuvastada näiteks seda, kui rääkijal on kiire ja ta vajab kiiresti infot. Ka Google otsib oma tuleviku osana emotsionaalset tehisintellekti, mis juhindub kasutaja meeleolust.
Ja see on võimalik. 2014 aastal käivitas Michigani ülikooli arvutiteadlaste meeskond nutitelefonirakenduse Priori, mis oli mõeldud telefonikõnede jälgimiseks, et tuvastada bipolaarse häire all kannatavate inimeste meeleolumuutuste varajased tunnused. "Need pilootuuringu tulemused annavad meile esialgse tõestuse kontseptsioonile, mille kohaselt suudame tavapärastes telefonikõnedes tuvastada meeleoluseisundeid, analüüsides kõne laialdasi funktsioone ja omadusi, rikkumata nende vestluste privaatsust," ütles projekti juht Zahi Karam.
Kui kaua teie suhe kestab
See on päris hull. Kleinberger juhib oma TED -kõnes teemal, miks meile ei meeldi meie enda hääl, mida ma soovitan teil vaadata või kuulata, välja tuua, et abielupaaride omavaheliste vestluste masinanalüüsi abil saab ennustada, kas ja millal te lahutate.
Eelmisel aastal avaldas Lõuna-California ülikooli töörühm uuringu, mis näitas, et 134 teraapias osalenud paari vestluste helikõrguse, helikõrguse varieerumise ja intonatsiooni tehisintellekti analüüs ennustas 79,3% täpsusega abielutulemusi, st kas suhe kestaks. See on tegelikult veidi kõrgem kui inimeksperdid, kellel oli õigus 75,6% ajast.
Kui teil on menstruatsioon… või olete rase
"Minu arvates on seos hormoonide taseme ja hääle vahel põnev," ütleb Kleinberger. "Me teame, et sellel on mõju. Teame, et isegi meie aju tuvastab selle teadlikult, ilma et me tegelikult selgelt aru saaksime. See on puhtalt akustiline teave, mis annab meile vihjeid kõneleja hormoonide taseme kohta. Ma arvan, et sellel võivad olla tohutud tagajärjed, hea või halb avastamise, eetika ja luuramise osas."
Nathan Pipitone'i ja Gordon Gallupi mitmed uuringud on näidanud, et kuulajad saavad tuvastada, kus naiskõneleja menstruaaltsüklis on, paludes meessoost osalejatel hääli atraktiivsuse järgi hinnata. 2008. aasta esimeste kohta Albany osariigi ülikoolis kirjutasid nad: "Tulemused näitasid häälte atraktiivsuse hinnangute märkimisväärset tõusu, kuna loomulikult rattaga sõitvatel naistel suurenes rasestumise risk menstruaaltsükli jooksul."
Siis on tõsiasi, nagu Kleinberger oma TED-kõnes ütleb, et ühel päeval saavad hääleassistendid teada, et olete rase, enne kui seda teete. Jällegi, see põhineb suuresti reaalsetel uuringutel.
2012 aastal Argentinas Italiano de Buenos Airese haiglas ja 2008. aastal Liibanonis Beiruti meditsiinikeskuses läbi viidud uuringutes leiti erinevusi kontrollrühmade ja rasedate naiste rühmade häältes. Beiruti uuringus leiti nii sarnasusi kui ka mõningaid erinevusi: "Rasedate naiste häälesümptomite esinemissageduses ei olnud olulisi erinevusi kontrollrühmas. Hääleväsimus oli aga rohkem levinud rasedate rühmas. Akustiliste parameetrite osas oli MPT (maksimaalne fonatsiooniaeg) märkimisväärne vähenemine.
Dr Alexa kuuleb teid nüüd
Üks inimene, kellega võiksite oma igapäevaseid vestlusi jagada, on teie arst. Selgub, et meditsiinilist kehakuulamise meetodit on praktiseeritud tuhandeid aastaid – ja hääle osas on see uuenduste keskel.
"Sõna auskultatsioon kasutasid vanad kreeklased," ütleb Kleinberger. "See on selline arusaam, et kehast lähtuva heli järgi mõistetakse keha. Põhimõtteliselt on see auskultatsiooni tüüp, kui arst paneb stetoskoobi teie südant kuulama. Hääle kasutamist auskultatsioonivahendina on kasutatud südamehaiguste ja kopsuhaigust pikka aega, kuulates patsiendi hääle hingamist. Aga nüüd hakkame tõesti tegema masinmoduleeritud auskultatsiooni."
Hiljutised uuringud selle kohta, milliseid haigusi võime häälega tuvastada, on hõlmanud depressiooni ja Parkinsoni tõve uuringuid. Max Little, matemaatik ja praegune Astoni ülikooli dotsent, leidis, et 30-sekundilise telefonikõne ajal inimeste hääli analüüsides võivad algoritmid tuvastada peeneid turbulentse ja tekstuurimuutusi. Need kõlavad inimkõrvale loomulikuna, kuid Little suutis neid kasutada Parkinsoni tõve varaseks tuvastamiseks, täpsusega umbes 99%. Kleinberger selgitab, et Parkinsoni tõve all kannataval inimesel on väga raske vestlust pidada, kuna tema hääl väsib ja ei ole nii kergesti kontrollitav kui mittehaigetel.
Mis puudutab depressiooni, siis tavapärane tarkus on see, et inimesed räägivad lihtsalt aeglasemalt: "See on tegelikult keerulisem kui see, kuid see on ikkagi seotud tempoga. Depressiooniga tehtud töö puhul on huvitav see, et tempo ühest sõnast teise ja nende sõnade üksikute silpide vahel."
Teame, et Silicon Valley ambitsioonid tervise osas ei tunne piire. Alphabetil on oma Verily Life Sciences'i kõrval glükoosi jälgimise kontaktläätsed ja meditsiinilised tervisekellad. Vahepeal näib, et Amazonil on Alexa divisjonis salajane tervise- ja heaolumeeskond sobivalt ebamäärase nimega Alexa domeenide all.
Teoreetiliselt võib alati sees olev nutika kodu assistent, mis teab, et oleme haiged enne seda, kui me haigeks jääme, ja võib kutsuda meid konkreetsetel põhjustel arstiabi otsima, päästa miljoneid elusid.
"Mida nad saavad koduseadmetega teha nende helisalvestistega, mis võivad meie jaoks olla head või halvad? Ma pole kindel," ütleb Kleinberger. "Kui nad meid aitavad, öelge "võib-olla peaksite minema arsti juurde kontrolli" – võib-olla see oleks hea. Kui nad kasutavad seda ettevõtte kasumi teenimiseks, on see võib-olla veidi vähem hea. Sellepärast teavitada avalikkust potentsiaalist, kas see juhtub täna või kahe, viie või kümne aasta pärast, ma arvan, et see on nii oluline teada. Me räägime kogu aeg andmetest, noh, teie hääles on palju andmeid. See pole ainult see, mida te ütlete."
Tulevik on miimika
Tõepoolest, kui räägime privaatsusest nutikodus 2018. aastal, keskendume ainult nende helisalvestiste ja ärakirjade sisule, sellele, mida need võiksid olla reklaamijatele väärt, kuidas neid kombineerida muu teabega, mida Amazon, Google ja Apple meie kohta koguvad. teenustest nagu Google Maps, Gmail, Amazon Prime, iTunes, Google'i otsing, iOS ja Android jne jne.
See lisab kasvavale avalikkusele kahtlust, et kõik Facebookist, Instagramist ja Amazonist kuulavad meie vestlusi nutitelefoni mikrofonide kaudu (kõnealused tehnoloogiaettevõtted eitavad seda) ja patente, mis näitavad, et Amazonil on kujundused kõikidel meie vestlustel, mitte ainult nendel, mis algavad äratussõna.
Kleinbergeri sõnul on hääleassistentide küsimuse teine pool Alexa, assistendi ja Siri hääled. Teame, et tehnoloogiaettevõtted valivad sõbralikke, enamasti naishääli, mis on "mitte liiga kõrged, kuid mitte liiga madalad" ja "mitte liiga domineerivad". Praegu me ei räägi nendega nagu teiste inimestega – mul on väga spetsiifiline juhendav hääl, mida kasutan Alexa ja Google'i assistendi jaoks. See on veidi valjem, veidi karmim, läheneb patroneerimisele ja tavaliselt vaatan rääkides nutikõlarit või seadet, et kontrollida, kas see on selle kinni püüdnud.
"Enamik uuringuid ja enamik elanikkonnast näitavad, et me kasutame masinaga rääkides teistsugust häält," ütleb ta. "Ma ei ole seda uurinud ja see pole ka tõestatud, kuid ma kahtlustan, et see on lähemal sellele, kuidas ebaviisakas, snoobne inimene räägiks restoranis kelneriga. Kas ettevõtetel oleks huvi minna kaugemale ja läbida kummaline org.? See on natuke Turingi test vokaalse tekstuuri osas. Mida oleks vaja, et luua vastav hääl, millest piisab, et saaksime seda tehnoloogiat inimeseks pidada?"
Alustades lapsele suunatud kõnest, seejärel robotite ja masinate poolt suunatud kõnest, on see uurimisvaldkond, mis kasvab – Kleinberger on hiljuti veetnud aega San Diego loomaaias, et uurida loomadele suunatud ja liikidevahelist kõnet. Kuid ta ütleb, et pole selge, kuidas hääleassistent, mis kõlab palju rohkem inimese moodi ja suudab meie hääle kaudu meie emotsioone reaalajas analüüsida, oleks kasulik… inimestele.
"See liigub miimika suunas. Inimestena matkime pidevalt teiste inimeste hääleparameetreid alateadlikult. Rõhud ja kogelemine on nakkavad. Kas see oleks hea või halb, kui masinad seda tegema hakkaksid?
"Ma arvan, et üsna pea hakkab tehnoloogia selles suunas liikuma. Kui inimesed on teadlikud, et see juhtub, ei pea see olema halb. Võib-olla muudab see osa sellest tehnoloogiast veidi vähem masentavaks. Kui teie hääl on ilmselgelt ärritunud, tuvastab masin selle ja selle asemel, et öelda "oh, sa kõlad ärritunult", kui masin hakkab rääkima teiega samas häälerežiimis, kas see aitab või mitte? Kui see läheb rohkem manipuleerimisrežiimi, on see keeruline küsimus, kuid huvitav."
Lõpuks taandub see jõudude tasakaalule teie ja mitme miljoni dollari suuruse ettevõtte vahel, kes on välja töötanud hääleassistendi, kellega te räägite. Nad teavad signaalide võimsust, mida meie hääl saadab, nii et mida rohkem oleme teadlikud sellest, mida inimesed ja masinad suudavad meie häälest tuvastada ja enda omast edastada, seda parem.