Jos olet joskus päättänyt tarkastella vuorovaikutustasi ääniavustajan, kuten Alexan tai Google Assistantin, kanssa, huomaat, että et voi vain nähdä (ja poistaa) komentojesi ja kysymystesi transkriptioita, vaan myös toistaa todellisen äänen. tallenteita.
Se on outoa kokea kuunnella kappaleita, joita pyysit kuusi kuukautta sitten. Paljon enemmän kuin vain tekstien lukeminen. Saat todellisen "sinun" tunteen sinä päivänä, ehkä nauroit vain perheesi kanssa ja se vuotaa siihen tai kuulostat kyllästyneeltä kallostasi.
Lue tämä: Kuinka Amazon, Google ja Apple käyttävät älykaiutintietojasi
Se on vasta alkua, sanoo Rébecca Kleinberger, MIT Media Labin Opera of the Future -ryhmän tutkimusassistentti. Tohtoriksi hän yhdistää neurologiaa, fysiologiaa, musiikkia, äänivalmennusta ja muuta tutkimusta tarkastellakseen "alitajuisia vihjeitä, joita ilmaisemme joka kerta kun puhumme", kuinka voimme saada ihmiset tiedostamaan omat äänensä ja rakentamaan uusia kokemuksia ympärilleen. ääni.
Kuuden vuoden aikana, kun hän on tutkinut ääniämme, hänen työhönsä on kuulunut kehomme tuottamien fyysisten värähtelyjen tutkimus ja kuinka se liittyy tärinäterapiaan. miksi emme pidä oman äänemme äänestä; miten kartoitamme lihaksemme tuottamaan ääniä ("ääni-asento"); ja kuinka syväoppimista voidaan käyttää reaaliaikaiseen puhujan tunnistamiseen jopa useaa kieltä puhuvien ihmisten kesken.
Älykaiuttimien yleistyessä kodeissamme, jotka tallentavat äänemme joka kerta, kun sanomme nuo maagiset herätyssanat, ajattelimme, että oli syytä tutkia, mitä välitämme äänellä ihmisille ja koneille. Ja Kleinberger sanoo, että ymmärrämme sen tai emme, "Ihmisen aivot ovat kehittyneet erittäin hyviksi analysoimaan kaikkia niitä piilotettuja elementtejä äänestä. Jos ne ovat havaittavissa koneiden avulla, se tarkoittaa, että aivomme havaitsevat ne jotenkin muiden ihmisten äänistä. ."
Hän ehdottaa, että näitä tiedostamattomia elementtejä ajatellaan "äänen feromoneina, melkein akustisina feromoneina, jotka vaikuttavat meihin monin tavoin tietämättämme".
Äänesi lähettämät signaalit
Kenen kanssa puhut
Äänemme vaihtelee riippuen siitä, kenelle puhumme ja kontekstista, niin paljon, että tutkijat ja heidän algoritminsa voivat kertoa, puhutko äitisi, pomosi vai ystäväsi kanssa. Ne voivat jopa havaita puhumasi henkilön iän.
"Vaikka yrität puhua normaalisti, kun puhut pienelle lapselle, äänesi muuttuu", Kleinberger sanoo. "Prosodia, musikaalisuus, jota käytät äänessäsi, on hyvin erilaista kuin silloin, kun puhut aikuisille."
Mielialasi
Tiedämme, että Amazonin Alexa-tiimit suuntaavat jo tutkimusta äänianalyysiin, joka pystyy havaitsemaan esimerkiksi kun puhujalla on kiire ja hän tarvitsee tietoa nopeasti. Myös Google etsii emotionaalista tekoälyä, jota ohjaavat käyttäjän mieliala osana tulevaisuuttaan.
Ja se on mahdollista. Vuonna 2014 Michiganin yliopiston tietojenkäsittelytieteilijöiden ryhmä lanseerasi Priori-nimisen älypuhelinsovelluksen, joka oli suunniteltu seuraamaan puheluita ja havaitsemaan kaksisuuntaisesta mielialahäiriöstä kärsivien ihmisten mielialan muutosten varhaiset merkit. "Nämä pilottitutkimuksen tulokset antavat meille alustavan todisteen käsityksestä, jonka mukaan voimme havaita mielialatilat tavallisissa puheluissa analysoimalla puheen laajoja piirteitä ja ominaisuuksia loukkaamatta näiden keskustelujen yksityisyyttä", hankkeen johtaja Zahi Karam sanoi.
Kuinka kauan suhteenne kestää
Tämä on aika hullu. Kleinberger huomauttaa TED – puheessaan, miksi emme pidä omasta äänestämme, jota kehotan katsomaan tai kuuntelemaan, että avioparien välisten keskustelujen koneanalyysin avulla voidaan ennustaa, eroatko ja milloin.
Viime vuonna Etelä-Kalifornian yliopiston tutkimusryhmä julkaisi tutkimuksen, joka osoitti, että 134 terapiaan osallistuvan parin välisten keskustelujen äänenkorkeuden, sävelkorkeuden vaihtelun ja intonaatioiden tekoälyanalyysillä oli 79,3 %:n tarkkuus avioliiton lopputuloksen ennustamisessa, eli onko suhde kestäisi. Se on itse asiassa hieman korkeampi kuin ihmisten asiantuntijat, jotka olivat oikeassa 75,6 % ajasta.
Jos sinulla on kuukautiset… tai olet raskaana
"Minusta hormonitasojen ja äänen välinen yhteys on kiehtova", Kleinberger sanoo. "Tiedämme, että sillä on vaikutusta. Tiedämme, että jopa aivomme havaitsevat sen tietoisesti ilman, että pystymme ymmärtämään selvästi. Puhtaasti akustinen tieto antaa meille vihjeitä puhujan hormonitasosta. Uskon, että tällä voi olla valtavia seurauksia, hyvä tai huono havaitsemisen, etiikan ja vakoilun kannalta."
Nathan Pipitonen ja Gordon Gallupin useat tutkimukset ovat osoittaneet, että kuuntelijat voivat havaita naispuolisen puhujan kuukautiskierron aikana pyytämällä miespuolisia osallistujia arvioimaan äänien houkuttelevuutta. He kirjoittivat ensimmäisistä vuonna 2008 Albany State Universityssä: "Tulokset osoittivat äänen houkuttelevuuden lisääntyneen merkittävästi, koska hedelmöittymisen riski kasvoi kuukautiskierron aikana luonnostaan pyöräilevillä naisilla."
Sitten on se tosiasia, kuten Kleinberger sanoo TED-puheessaan, että jonain päivänä ääniavustajat voivat tietää, että olet raskaana ennen kuin teet. Tämä taas perustuu pitkälti todelliseen tutkimukseen.
Vuonna 2012 Italiano de Buenos Airesin sairaalassa Argentiinassa ja vuonna 2008 Beirutin lääketieteellisessä keskustassa Libanonissa tehdyissä tutkimuksissa havaittiin eroja kontrolliryhmien ja raskaana olevien naisten ryhmien välillä. Beirutin tutkimuksessa löydettiin sekä yhtäläisyyksiä että joitain eroja: "Raskaana olevien naisten äänioireiden esiintyvuudessa ei ollut merkittäviä eroja verrokkeihin verrattuna. Äänen väsymys oli kuitenkin yleisempää raskaana olevien ryhmässä. Akustisten parametrien suhteen oli merkittävä lasku MPT:ssä (maksimi soittoaika) aikavälillä."
Tohtori Alexa kuulee sinua nyt
Yksi henkilö, jonka kanssa saatat haluta jakaa päivittäiset keskustelusi, on lääkärisi. Osoittautuu, että lääketieteellistä kehon kuuntelumenetelmää on harjoitettu tuhansia vuosia – ja se on keskellä päivitystä äänen suhteen.
"Muinaiset kreikkalaiset käyttivät sanaa auskultaatio", Kleinberger sanoo. "Se on käsitys kehon ymmärtämisestä kehosta tulevan äänen perusteella. Periaatteessa kun lääkäri laittaa stetoskoopin kuuntelemaan sydäntäsi, se on eräänlaista auskultaatiota. Äänen käyttöä kuunteluvälineenä on käytetty sydänsairauksien ja keuhkosairaus pitkään, kuunnellen potilaan äänen hengittämistä. Mutta nyt olemme todella alkaneet tehdä konemoduloitua auskultaatiota."
Viimeaikaiset tutkimukset siitä, mitä sairauksia voimme havaita äänellä, ovat käsittäneet masennusta ja Parkinsonin tautia. Max Little, matemaatikko ja nykyisin Astonin yliopiston apulaisprofessori, havaitsi, että analysoimalla ihmisten ääniä 30 sekunnin puhelusta algoritmit pystyivät havaitsemaan hienovaraisia turbulensseja ja tekstuurimuutoksia. Nämä kuulostavat luonnollisilta ihmiskorvassa, mutta Little pystyi käyttämään niitä Parkinsonin taudin havaitsemiseen varhaisessa vaiheessa noin 99 prosentin tarkkuudella. Kleinberger selittää, että Parkinsonin taudista kärsivän on erittäin vaikea keskustella, koska hänen äänensä väsyy ja ei ole yhtä helposti hallittavissa kuin ei-sairaiden.
Mitä tulee masennukseen, tavanomainen viisaus on, että ihmiset yksinkertaisesti puhuvat hitaammin: "Se on itse asiassa monimutkaisempaa, mutta se liittyy silti tempoon. Masennuksen parissa tekemäni työssä mielenkiintoista on se, että tempo sanasta toiseen ja yksittäisistä tavuista näissä sanoissa."
Tiedämme, että Piilaakson tavoitteet terveyden suhteen eivät tunne rajoja. Alphabetilla on omat Verily Life Sciences -yritykset, jotka rakentavat glukoosimittauspiilolinssejä ja lääketieteellisiä terveyskelloja. Sillä välin Amazonilla näyttää olevan salainen terveys- ja hyvinvointitiimi Alexa-divisioonassa, sopivasti epämääräisesti nimettyjen Alexa Domains -verkkotunnusten alla.
Teoriassa aina päällä oleva älykäs kodin avustaja, joka tietää, että olemme sairaita ennen kuin saimme, ja voi kehottaa meitä hakeutumaan lääkärin hoitoon tietyistä syistä, voisi pelastaa miljoonia ihmishenkiä.
"Mitä he voivat tehdä kodin laitteilla äänitallenteille, jotka voivat olla joko hyviä tai huonoja meille? En ole varma", Kleinberger sanoo. "Jos he auttavat meitä, sanokaa "ehkä sinun pitäisi mennä lääkäriin tarkastukseen" – ehkä se voisi olla hyvä. Jos he käyttävät sitä yrityksen voittoihin, se on ehkä hieman vähemmän hyvä. Siksi yleisölle tiedottaminen mahdollisuuksista, tapahtuupa näin tänään tai kaksi, viisi tai kymmenen vuotta, mielestäni on niin tärkeää tietää. Puhumme datasta koko ajan, no, sinulla on paljon dataa äänessäsi. Se ei ole vain sitä, mitä sanot."
Tulevaisuus on mimiikkaa
Todellakin, kun puhumme yksityisyydestä älykodissa vuonna 2018, keskitymme pelkästään näiden äänitallenteiden ja transkriptioiden sisältöön, mitä arvoisia ne voivat olla mainostajille, miten ne voidaan yhdistää muihin Amazonin, Googlen ja Applen meistä keräämiin tietoihin. palveluista, kuten Google Maps, Gmail, Amazon Prime, iTunes, Google-haku, iOS ja Android jne.
Tämä lisää kasvavaa julkista epäilyä siitä, että kaikki Facebookista, Instagramista ja Amazonista kuuntelevat keskustelujamme älypuhelinmikrofonien kautta (kyseiset teknologiayritykset kiistävät sen) ja patenttien, jotka osoittavat, että Amazonilla on kuvioita kaikissa keskusteluissamme, ei vain keskusteluissamme, jotka alkavat herätyssana.
Toinen puoli arvoitusta ääniassistenttien suhteen on Kleinbergerin mukaan Alexan, Assistantin ja Sirin äänet. Tiedämme, että teknologiayritykset valitsevat ystävällisiä, enimmäkseen naisääniä, jotka "eivät ole liian korkeat, mutta eivät liian matalat" ja "ei liian hallitsevia". Tällä hetkellä emme puhu heille kuten muille ihmisille – minulla on hyvin erityinen "ohjaava ääni", jota käytän Alexalle ja Google Assistantille. Se on hieman kovempi, hieman ankarampi, lähestyy holhoamista, ja katson yleensä älykaiutinta tai laitetta puhuessani tarkistaakseni, onko se kiinni.
"Useimmat tutkimukset ja suurin osa väestöstä osoittavat, että käytämme eri ääntä puhuessamme koneelle", hän sanoo. "En ole tehnyt tutkimusta tästä, eikä sitä ole todistettu, mutta epäilen, että se on lähempänä sitä, kuinka töykeä, snobi ihminen puhuisi tarjoilijalle ravintolassa. Olisiko yrityksillä kiinnostusta mennä pidemmälle ja ohittaa kammottava laakso? Se on hieman Turingin testi laulutekstuurin suhteen. Mitä vaaditaan sellaisen vastausäänen luomiseen, joka saa meidät pitämään tätä tekniikkaa ihmisenä?"
Alkaen lapsille suunnatusta puheesta, sitten robotti- ja koneohjatusta puheesta, tämä on kasvava tutkimusalue – Kleinberger on viime aikoina viettänyt aikaa San Diegon eläintarhassa tutkiakseen eläinohjattua ja lajien välistä puhetta. Mutta hänen mukaansa ei ole selvää, kuinka ääniavustaja, joka kuulostaa paljon enemmän ihmiseltä ja voisi analysoida tunteitamme reaaliajassa äänemme avulla, hyödyttäisi… ihmisiä.
"Se on menossa matkimisen suuntaan. Ihmisinä matkimme tiedostamatta toisten ääniparametreja koko ajan. Aksentit ja änkytys ovat tarttuvia. Olisiko se hyvä vai huono asia, jos koneet alkavat tehdä niin?
"Uskon, että melko pian tekniikka menee tähän suuntaan. Jos ihmiset ovat tietoisia, että niin tapahtuu, sen ei tarvitse olla huono asia. Ehkä se tekee osan tästä tekniikasta hieman vähemmän turhauttavaa. Jos äänesi on selvästikin järkyttynyt, kone havaitsee sen ja sen sijaan että sanoisi "oi, kuulostat järkyttyneeltä", jos laite alkaa puhua samassa äänitilassa kuin sinä, auttaako se vai ei? Jos se menee enemmän manipulointitilaan, se on hankala kysymys, mutta mielenkiintoinen."
Loppujen lopuksi se riippuu voimatasapainosta sinun ja sen usean miljoonan dollarin yrityksen välillä, joka on kehittänyt puheavustajan, jonka kanssa puhut. He tietävät äänemme lähettämien signaalien voiman, joten mitä enemmän olemme tietoisia siitä, mitä ihmiset ja koneet voivat havaita äänestämme ja lähettää omasta äänestään, sitä parempi.