Ihmisen kasvot saavat voiman 23 - 43 lihaksesta riippuen siitä, kuinka lasket ne, 23 - 43 lihaksesta, joista monet kiinnittyvät ihoon, eivätkä tarjoa mitään selvää selviytymistoimintoa. Ulkomaalainen, joka tutkii ihmisnäytteen erikseen, ei tiedä mitä niistä tehdä. Hierotessaan otsaan, kulmakarvoihin, huuliin ja poskeihin, lihakset lähettävät runsaasti tietoa tunnetilamme, kiinnostuksen tasosta ja valppaudesta. Se on erittäin tehokas viestintäväline - melkein hetkellinen, yleensä tarkka ja ylittää useimmat kieli- ja kulttuuriesteet. Mutta joskus tiedot menetetään, jätetään huomiotta tai niitä tulkitaan väärin. Jos puunkorjuu hymyili metsässä kenenkään ympärillä nähdäkseen hänet, oliko hän todella onnellinen?
Tästä tarinasta
[×] SULJE
Niin pitkät hymiöt. Tutkija kehittää tekniikkaa, joka pystyy havaitsemaan ja lukemaan lausekkeemme
Video: Smithsonian kekseliäisyyspalkinnot 2015: Rana el Kaliouby
Aiheeseen liittyvät lukemat
Emotionaalinen älykkyys: miksi se voi olla tärkeämpää kuin IQ
OstaaRana el Kaliouby vihasi nähdä, että tiedot menevät hukkaan. Tapaamalla el Kalioubyn hänen pienessä toimistossaan Walthamissa, Massachusettsissa, näen hänen supistuvan hänen zygomaticus-päälihakseenen, nostaen suun suun ja orbicularis-silmänsä, rypistäen silmiensä ulkokulmia. Hän hymyilee, ja päättelen, että hän toivottaa minut tervetulleeksi, ennen kuin hän edes julkaisee sanan "hei". Mutta monet sosiaaliset keskustelut tapahtuvat nykyään ilman reaaliaikaista kasvokkain tapahtuvaa vuorovaikutusta. Siellä el Kaliouby ja hänen yritys tulevat sisään.
El Kaliouby, joka on 37, hymyilee usein. Hänellä on pyöreä, miellyttävä, ilmeikäs kasvot ja avulias tapa, ja hän on toiminut nopeasti kasvavan teknologiayrityksen perustajana - anti-Bezos, un-Zuckerberg. Hänen yrityksensä, Affectiva, jonka hän perusti vuonna 2009 MIT Media Labin silloisen kollegan Rosalind Picardin kanssa, on tekniikan kärjessä, jotta tietokoneita voidaan käyttää ihmisten ilmeiden havaitsemiseen ja tulkintaan. Tällä kentällä, joka tunnetaan nimellä "afektiivinen laskenta", pyritään poistamaan ihmisten ja koneiden välinen viestintäkuilu lisäämällä uusi vuorovaikutusmuoto, mukaan lukien hymien, smirkkien ja kohotettujen kulmakarvojen ei-sanallinen kieli. "Teemme lähtökohtana on, että tunteet ovat tärkeitä", sanoo el Kaliouby. ”Tunteet eivät häiritse rationaalista ajattelumme, vaan opastavat ja kerrovat siitä. Mutta he puuttuvat digitaalisesta kokemuksestamme. Älypuhelimesi tietää kuka olet ja missä olet, mutta se ei tiedä miltä sinusta tuntuu. Pyrimme korjaamaan tilanteen. ”
Miksi älypuhelimen on tiedettävä miltä sinusta tuntuu? El Kalioubyllä on joukko vastauksia, jotka kaikki perustuvat tietokoneiden näennäisesti rajattomaan integrointiin jokapäiväisessä elämässämme. Hän harkitsee ”tekniikkaa, jolla hallitaan kodin valaistusta, lämpötilaa ja musiikkia mielialamme vastaukseksi”, tai sovelluksia, jotka voivat mukauttaa elokuvan sisällön sen perusteella, kuinka alitajuntaan reagoit siihen, kun katsot. Hän kuvittelee ohjelmia, jotka voivat tarkkailla ilmaisua ajaessasi ja varoittaa tarkkailemattomuudesta, unelmasta tai vihasta. Hän hymyilee mainitsemalla suosikkiideansa - "jääkaapin, joka tuntuu, kun olet stressaantunut, ja lukitsee jäätelön".
Erityisesti hänen mielestään Affectiva ja tekniikka, jolla se auttaa pääsemään valtavirtaan, ovat terveydenhuollon siunaus. Uutta lääkettä testaava tutkija tai potilasta hoitava terapeutti saa palautetta vain määräajoin, ottaen huomioon kaikki itseraportoinnin ongelmat - esimerkiksi tiedostamaton halu miellyttää lääkäriä tai valikoiva muistaminen, joka suosii viimeisimpiä muistoja. . El Kaliouby suunnittelee kohteen kannettavan tietokoneen tai puhelimen taustalla käynnissä olevaa ohjelmaa, joka voisi koota hetken kerrallaan hänen mielialaansa tietyn ajanjakson (päivä, kuukausi) ja korreloida sen aikaa tai jotain muuta, jonka laite voi mitata tai seurata. "Sen ei tarvitse olla edes osa hoito-ohjelmaa", hän musesi. "Sinulla voisi olla se vain puhelimellasi, ja se kertoo sinulle, että jokaisella" X "-puhelulla on negatiivinen lauseke, ja se kertoo sinulle jotain, jota et ehkä tiennyt."
Tilaa Smithsonian-lehti nyt vain 12 dollarilla
Tämä tarina on valikoima Smithsonian-lehden joulukuun numerosta.
OstaaEl Kaliouby edistää afektiivista laskentaa seuraavana loogisena askeleena näppäimistöstä hiireen kosketusnäyttöön äänentunnistukseen. Keväällä Affectiva julkaisi ensimmäisen kaupallisen ohjelmistokehityspaketin, jonka kehittäjät, jotka ovat kiinnostuneita käyttäjien reaaliaikaisista tunnetiloista, voivat sisällyttää omiin ohjelmiinsa - esimerkiksi musiikkisoittimiin tai peli- tai treffisovelluksiin. Ja juuri tänä syksynä Affectiva toi markkinoille Emotion As a Service -pilvipohjaisen ohjelman, johon asiakkaat voivat ladata videoita analysoitavaksi. Kuka voisi käyttää tätä? Haastateltavaksi haettava ehdokas, joka on huolissaan siitä, että näyttää olevan ahdistunut tai tylsistynyt tai jopa hymyilevä liikaa. Tai lentoyhtiö, joka palkkaa lentoemäntäjä, satojen video-sovellusten avulla, jotka etsivät niitä, jotka pystyvät hallitsemaan vakuuttavan hymyn tarjoamalla matkustajille hyvästit. (Aitoa hymyä, johon liittyy silmien kulmien lihaksien supistumista, kutsutaan ”Duchenne-hymyksi”, nimeltään 1800-luvun anatomisti; sen vastakohta, vain suuhun käyttäytyvä pakotettu hymy, on todella joskus nimeltään “Pan Am” -hymy.)
Ja tietysti kaikki tätä ohjelmistoa käyttävät laitteet ovat yhteydessä Internetiin, joten heidän keräämät tiedot kootaan hetkessä, seulotaan ja verkotetaan tavalla, jolla sosiaalisen median sovellukset tunnistavat suositut aiheet tai persoonallisuudet. Käännetään kenties Affectiva Mood -indekseksi, numeeriseksi lukemaksi bruttokansallisesta onnellisuudesta tai jaotellaan alueiksi, joilla hymyillä tai kulmilla on tällä hetkellä trendi.
Affectivan perusohjelma analysoi kasvot 20 kertaa sekunnissa 46 paikalliselle ilmaisulle onnellisuus, suru, yllätys, pelko, viha, inho ja halveksunta sekä kiinnostus ja sekavuus. (Naomi Shavin / Smithsonian) Affectivan pääasiakkaat ovat tähän asti olleet mainonta-, markkinointi- ja mediayrityksiä. Sen ohjelmisto automatisoi fokusryhmän järjestämisprosessin, hankalan rituaalin, jonka mukaan kymmenkunta ihmistä kokoontuu huoneeseen mielipiteensä uudesta tuotteesta, TV-sarjasta tai mainoskampanjasta. Se tallentaa reaktiot suoraan ilman, että osallistujan on pakko kääntää valitsinta tai vastata kyselyyn vastauksena esitykseen. Lisäksi ohjelmisto laajentaa potentiaalisen kohderyhmän koko maailmaan tai ainakin sen merkittävään osaan, jolla on verkkokameran avulla toimiva tietokone tai mobiililaite.
Palaute Affectivan hellittämättömästä, kaiken näkevästä silmästä auttoi muodostamaan verkko-tv-kanavan, jolloin kaksi merkkiä unohdettiin synniksi siitä, että katsojat eivät saa hymyilemään. (El Kaliouby ei tunnista esitystä tai hahmoja.) Sen ohjelmistoa käytettiin rakentamaan ”hymynäytteenottaja”, kone, joka jakoi karkkia baareja ostajille, jotka hymyilivat sen kameraan. Jos lisätutkimuksia, siitä voisi olla hyötyä väkijoukkojen tarkkailemisessa lentokentillä, mahdollisten myyjien löytämiseksi tai valheentunnistimena.
Mutta El Kaliouby on vastustanut näitä salamurheellisia sovelluksia, riippumatta siitä, miten he tuottavat. Hänen mielestään afektiivinen tietotekniikka muuttaa maailmaa, mukaan lukien, mutta ei suinkaan, rajoitetusti, myynti karkkeja. "Yrityksemme etosuus", hän sanoo, "on käyttää tätä tekniikkaa parantamaan ihmisten elämää ja auttaa heitä kommunikoimaan paremmin, ei pelkästään auttamaan mainostajia myymään enemmän tuotteita."
**********
Toisin kuin monet tekniikan yrittäjät, rikastua ei ollut el Kalioubyn alkuperäisessä asialistalla. Kairossa syntynyt egyptiläisille vanhemmille, jotka molemmat työskentelevät tekniikan suhteen, hän opiskeli tietotekniikkaa Kairossa sijaitsevassa amerikkalaisessa yliopistossa, jossa hän valmistui vuonna 1998, noin aikaan, kun tietokoneista tuli riittävän voimakkaita, jotta tutkijat voisivat ajatella antaa heille mitä inhimillisellä tasolla on jota kutsutaan tunneälyksi.
Hän jatkoi tietotekniikan opiskelua Cambridgen yliopistossa saapuessaan heti Amerikkaan 11. syyskuuta 2001 tehtyjen iskujen jälkeen. Hänen vanhempiensa mielestä hänet vaarassa pidättää, häiritä tai pahempaa perintönsä takia. Mutta vaikka hän käytti muslimien päänsuojaa pari vuotta sitten, ei Cambridgessa, Englannissa, eikä Cambridgessä, Massachusettsissa, jonne hän muutti vuonna 2006 liittyäkseen MIT Media Lab -yhtiöön, puhuiko hän koskaan uskonnostaan tai ulkonäköstään . ”Minusta se johtuu siitä, että hymyilen paljon”, hän sanoo hymyillen.
Ranskalainen anatomisti Duchenne julkaisi merkittäviä tutkimuksia ihmisen ilmeistä. (Bridgeman kuvat) Cambridgessa ollessaan hän oli kiinnostunut autismista, etenkin vaikeuksista, joita autistisilla lapsilla on kasvoilmaisun lukemisessa. Hän ehdotti "emotionaalisen kuulolaitteen" rakentamista, jota voitaisiin käyttää lukemaan kasvoja ja ohjaamaan asianmukaista käyttäytymistä käyttäjälle. Kansallisen tiedesäätiön myöntämästä rahoitusta sillä perusteella, että projekti oli liian vaikea, hän rakensi yhdessä kollegoineen prototyypin, joka koostui pienestä kamerasta varustetuista silmälaseista, vilkkuvista valoista ja kuulokkeista, toisin kuin varhainen versio Google Glassista. Toinen apurahahakemus onnistui, ja muuton jälkeen MIT: ään hän työskenteli tiiminsä kanssa seuraavat kolme vuotta täydentääkseen ja testatakseen sitä Rhode Islandin koulussa. El Kaliouby kuvailee sitä "tutkimusprojektiksi ja onnistuneeksi" - sitä käyttäneillä autistisilla lapsilla oli ylivoimaisesti positiivisia kokemuksia - mutta vuonna 2008 apurahan päättyessä hänellä oli hetki harkintaa. Kaupallinen kiinnostus afektiiviseen tietotekniikkaan kasvoi, ja hän halusi nähdä sen kasvavan ja kukoistavan; hänen pyrkimyksensä lasien kehittämiseen rajoittaisivat sen pieneen osaan sen mahdollisista käyttötavoista. Joten hän kehräsi Picardin kanssa Affectivan, pitäen samalla kiinni toivosta, että toinen yritys noutaa emotionaalisen kuulolaitteen ja saattaa sen markkinoille.
Kun Affectiva perustettiin, kourallinen joukosta "ryhmän jäseniä", jotka muodostivat yrityksen, jokainen valitsi arvon, jonka he halusivat ilmentää, kuten "oppimisen" tai "sosiaalisen vastuun" tai "hauskanpidon". Hänen strategia- ja tiedejohtajanaan, oli "intohimo". 20 hengen yritystä johdetaan lähes demokratiana, ja sen avulla pidetään puolivuosittain kokouksia, joissa työntekijät äänestävät seuraavan kuuden kuukauden tavoitteista. Hänen toimistossaan on taulu, jonka päällään piirtävät toisen kollegansa nuori tytär; hänellä on 6-vuotias poika Adam ja 12-vuotias tytär Jana, jotka asuvat hänen kanssaan Bostonin lähiöissä (heidän isänsä asuu Egyptissä). Hänen tapansa on leuto ja huomaavainen; Tunnin aamupäiväkokoukseen hän tarjoaa tilata voileipän vierailijalle, vaikka hän itse ohittaa lounaan. "Se on minulle Ramadan", hän sanoo hymyillen, "mutta se ei ole sinulle Ramadan."
Hän istuu kävijöitä pöydällä, kohti näyttöä ja verkkokameraa; ohjelmisto etsii vierailijan kasvot ja piirtää ruudun sen ympärille näytölle. Se identifioi joukon jäljitettäviä pisteitä: silmien ja suun kulmat, nenän kärki ja niin edelleen. Kaksikymmentä kertaa sekunnissa, ohjelmisto etsii ”toimintayksiköitä”, usein toistuvaa lihaksen leikkiä koko kasvoille. Näitä on 46, vakiona olevan luokittelujärjestelmän, kasvohoitojen koodausjärjestelmän (FACS) mukaan. Ne sisältävät sisä- ja ulkokorotuksen nostajat, himmentimet, vilkkuvat, silmänräpäisevät ja huulipuristimet, virittäjät, puristimet ja imevät. Affectivan vakio-ohjelmassa näytetään noin 15 näistä milloin tahansa, ja analysoi niitä seitsemän perustunteen ilmaisemiseksi: onnellisuus, suru, yllätys, pelko, viha, inho ja halveksunta sekä kiinnostus ja sekavuus. Hymyile, ja voit nähdä onnellisuuden ampumisen; kiertäkää huuliasi hymyillen ja ohjelma toteaa inhoasi.
Tai tarkemmin sanottuna inhoasi. Afektiivisen laskennan koko lähtökohta perustuu siihen, mikä merkitsee uskoa, että hymy välittää onnellisuuden tai nautinnon tai huvituksen. Ihmiset ovat tietysti samassa asemassa: Meitä voi hämätä väärä hymy tai viha, joten emme voi oikeastaan odottaa enemmän mitään tietokoneohjelmasta, ainakaan ei vielä.
Ajan myötä Affectiva on rakentanut yli kolmesta miljoonasta kasvojen video-arkistosta, jotka ovat ladanneet noin 75 maasta ympäri maailmaa rekrytoidut Internet-käyttäjät. Koulutetut tarkkailijat ovat analysoineet satoja tuhansia näistä ja koodaaneet FACS-toimintayksiköille. Tämä on monumentaalinen tehtävä, koska videoiden keskimääräinen kesto on noin 45 sekuntia, ja kunkin prosessointi kestää noin viisi kertaa kauemmin. Ihmiskooderien tulokset puolestaan käytettiin “kouluttamaan” yrityksen algoritmeja, jotka käsittelivät loput reaaliajassa. Koko tietokanta käsittää nyt noin 40 miljardia ”tunnepistepistettä”, resurssi, el Kaliouby, joka erottaa Affectivan muista saman alan yrityksistä, kuten Kaliforniassa toimiva Emotient, todennäköisesti lähin kilpailija.
(Kuvio: 5W infografia; Lähde: Daniel McDuff, MIT Media Lab, Affectiva) Daniel McDuff, joka liittyi Affectivaan MIT Media Labista ja toimii tutkimusjohtajana, opiskelee jatkuvasti tätä potkua saadakseen lisätietoja tunteiden ilmaisusta. Kuinka ne eroavat iästä, sukupuolesta ja kulttuurista? (Ehkä yllättäen, McDuff on havainnut, että vanhemmat ihmiset ovat ilmaisullisempia, etenkin positiivisten tunneiden suhteen, kuin nuoremmat.) Voimmeko luotettavasti mitata halveksuntaa, hämmennystä, tylsyyttä, ahdistusta? Milloin kulmakarva merkitsee sekaannusta ja milloin se osoittaa keskittymistä? Kuinka voimme erottaa pelon ilmaisun ja yllätyksen merkitsevän ilmaisun? (Vihje: Toimintayksikkö 1, ”sisäinen kulmankorotus”, on pelon merkki; toimintayksikkö 2, ”ulkokorvauksen korottaja” osoittaa yllätystä.) Hänen mukaansa on syytä uskoa ohjelman jatkamiseen. saada paremmin ilmaisujen havaitsemiseksi (vaikka se ei välttämättä koskaan kokonaan ylitä kaikkien suurimpia esteitä: Botoxia).
Pyynnöstäni McDuff antoi ohjelmalle yhden tunteiden havaitsemisen suurista klassisista ongelmista, Mona Lisan, jonka arvoituksellinen kvaasihymy on kiehtonut katsojia 500 vuoden ajan. Varoituksen kanssa, että ohjelmisto toimii parhaiten lauseiden siirtämisessä, ei staattisissa kuvissa, hän kertoi, että se ei löytänyt todisteita La Giocondan aitoa hymyä, vaan pikemminkin jonkin yhdistelmän toimintayksiköitä 28 (huulipyörä) ja 24 (huulet painetaan yhteen)., mikä saattaa viitata jonkinasteiseen epämukavuuteen.
**********
"Puhun teille nyt", el Kaliouby sanoo, "ja katson teitä arvioimaan kiinnostustanne mitä sanon. Pitäisikö minun hidastaa ja selittää enemmän? Pitäisikö minun siirtyä toiseen aiheeseen? Kuvittele nyt, että annan verkkoseminaarin suurelle ryhmälle, jota en voi nähdä tai kuulla. En saa palautetta, joten ei voi kertoa, toimiiko vitsi vai putosi, jos ihmiset ovat kihloissa tai kyllästyneitä. Eikö olisi hienoa saada tätä palautetta reaaliajassa, aggregoitua, hetkestä hetkestä kulkeessani? "
Hän näyttää mainoksen Jibolle, ”sosiaaliselle robotille”, joka on ennakkotilattavissa joukkorahoittajasivustolla Indiegogo ja jonka on kehittänyt MIT: n entinen kollega, Cynthia Breazeal. Näyttäen jotain huipputeknisestä laavavalaisimesta, Jibo istuu pöydällä ja skannaa ympäristönsä, tunnistaa yksilöitä kasvot ja olla vuorovaikutuksessa heidän kanssaan - välittää viestejä, antaa muistutuksia, soittaa rutiinipuheluita ja jopa jutella. Tämä on toinen mahdollinen sovellus Affectivan ohjelmistoon - yritykset ovat neuvotteluissa - ja se on ”erittäin jännittävä näkymä”, el Kaliouby sanoo.
Jotkut jännittävät, mutta tunneprosessointirobotit ovat huolestuttavia toisille. Sherry Turkle, joka on pitkään tutkinut ihmisten suhdetta tietokoneisiin, varoittaa uudessa kirjassaan Reclaiming Conversation: The Talk of Power digitaalikaudella ”robottihetkestä”, jolloin koneet alkavat korvata ihmisen seurausta. Turkle uskoo, että el Kalioubyn kaltaiset tutkijat ja hänen ryhmänsä voivat tehdä sen, mitä he sanovat tekevänsä. "Nämä ovat kaikki nerokkaita, lahjakkaita ihmisiä, jotka tekevät loistavaa työtä", hän sanoo. Ja hän on samaa mieltä siitä, että tietyissä tilanteissa - vaarallisissa ympäristöissä, kuten ulkoavaruudessa tai raskaiden koneiden ympärillä, joihin haluat sisällyttää kaikki mahdolliset viestintämuodot - afektiivisella laskennalla on rooli. "Mutta seuraava askel", hän sanoo, "ei seuraa ollenkaan. Seuraava askel on, tehdään robottiystävä. Olen haastatellut vanhempia, jotka ovat onnellisia heidän lapsensa puhuessaan Sirin kanssa, ja mielestäni se ei vie meitä tielle, johon haluamme mennä. Määrittelemme itsemme ihmisiksi sen mukaan, kenen kanssa olemme yhteydessä, ja minusta ei ole mitään järkeä muodostaa itsetuntoa koskevaa tunnetta koneesi suhteen. Miksi haluat tietokoneen tietävän jos olet surullinen? ”
Jopa el Kaliouby on taipuvainen olemaan yhtä mieltä siitä, että "vietämme enemmän aikaa kuin meidän pitäisi käyttää laitteidemme kanssa", pitäen mielessä luonnollisesti hänen preteen-tyttärensä, jonka katse lukittuu älypuhelimen näytölle.
Mutta hän pitää yhä suurempien yhteyksien kehitystä peruuttamattomana ja katsoo, että vaikka käyttäjien on aina oltava valinnassa, voimme yhtä hyvin hyödyntää sitä. Hän ennustaa, että laitteissamme on ”tunnepiiri ja sovelluspaketti, joka käyttää sitä tavalla, joka lisää elämäämme niin paljon lisäarvoa, että se ylittää ihmisten huolet näiden tietojen jakamisesta.” Hän vertaa analogiaa GPS-laitteisiin: Vaikuttava laskenta voi autamme meitä liikkumaan tunnetilassa samalla tavalla kuin puhelinsovellukset auttavat meitä liikkumaan fyysisessä tilassa. "Kaikki olivat huolissaan paikannuslaitteista heti ensimmäisen tullessaan markkinoille: He hyökkäsivät yksityisyyteen, seurasivat meitä koko ajan", hän sanoo. ”Vain nyt olemme eksyneet ilman Google Maps -sovellusta puhelimissamme. Uskon, että tämä on sama. ”
**********
