Als je iemand met gefronste wenkbrauwen ziet, mond afgewezen, en ogen dichtgeknepen, zou je denken dat ze boos zijn? Wat als je erachter zou komen dat ze hun leesbril waren vergeten en een restaurantmenu aan het ontcijferen waren?

Het interpreteren van de gezichtsbewegingen van een persoon kan niet in een vacuüm worden gedaan; het hangt af van de context - iets dat de noordoostelijke neurowetenschapper Lisa Feldman Barrett laat zien in een baanbrekende nieuwe studie die donderdag in het wetenschappelijke tijdschrift is gepubliceerd Natuurcommunicatie .

Barrett, een universiteitsprofessor in de psychologie aan Northeastern, en collega's van verschillende andere instellingen over de hele wereld gebruikten foto's van professionele acteurs die rijkelijk geconstrueerde scenario's uitbeelden om te laten zien dat mensen niet alleen verschillende gezichtsbewegingen gebruiken om verschillende gevallen van dezelfde emotiecategorie te communiceren (iemand zou fronsen, frons, of zelfs lachen als ze woede uitbeelden), ze gebruiken ook vergelijkbare gezichtsconfiguraties om een ​​reeks voorbeelden uit verschillende emotiecategorieën te communiceren (een frons kan soms concentratie uitdrukken, bijvoorbeeld) - bevindingen die ernstige implicaties hebben voor emotieherkenningstechnologie die beweert emoties in het gezicht te "lezen".

"De implicatie van deze studie is dat er veel meer variabiliteit is in de manier waarop mensen verschillende gevallen van een bepaalde emotiecategorie uiten. En één gezichtsconfiguratie kan gevallen van woede uitdrukken, blijheid, of andere emotiecategorieën, afhankelijk van de context, ' zegt Barrett.

Mensen kunnen hun ogen vergroten omdat ze boos of verrast zijn, en het menselijk brein is afhankelijk van de context om deze puzzel op te lossen.

Eerdere wetenschappelijke studies van emotie-uitingen waren gebaseerd op gewone mensen of amateuracteurs om een ​​enkele instantie uit elke emotiecategorie te portretteren in een verarmde context:"Je neef is net overleden en je voelt je erg verdrietig. Welke uitdrukking zou je maken?"

Dergelijke weergaven sporen mensen aan om te leunen op stereotiepe uitingen van emotie (fronsen van verdriet), in plaats van uitdrukkingen die een rijker gevoelsleven weerspiegelen, vol nuance en gesitueerde variatie, zegt Barrett.

Dus voor hun studie, Barrett en haar co-auteurs gebruikten foto's van professionele acteurs - mensen met 'expertise over emotie' omdat hun levensonderhoud afhangt van 'hun authentieke weergave van emotionele ervaringen in films, televisie, en theater, "op een manier die geloofwaardige informatie uitzendt, schrijven de onderzoekers.

De acteurs kregen een gedetailleerde, emotie-oproepend scenario om uit te voeren, en vervolgens gefotografeerd door Howard Schatz (die ook de scenario's maakte) voor twee gepubliceerde delen:In Character:Actors Acting, en op heterdaad betrapt:acteurs die acteren.

Een voorbeeld uit de boeken van Schatz:"Hij is een motorrijder die uit een motorbar komt, net zoals een man in een Porsche achteruit in zijn glanzende Harley stapt, " volgens de paper van de onderzoekers.

"Wat belangrijk is, is dat deze beroemde acteurs een scenario kregen zonder emotiewoorden erin, "Barret zegt, waardoor de directe verbinding die men zou kunnen maken tussen, bijvoorbeeld, het woord "verdrietig" en de gezichtsuitdrukking "frons".

De onderzoekers gebruikten 604 van de 731 foto's in de boeken van Schatz, alleen degenen elimineren waarin de gezichtshoudingen van de acteurs niet konden worden geanalyseerd omdat hun handen hun gezicht bedekten of omdat hun hoofd extreem gekanteld was.

Ze gebruikten die foto's en scenario's om twee onderzoeken uit te voeren. In de eerste, de onderzoekers vroegen 839 vrijwilligers om alleen de emotionele betekenis van de scenariobeschrijvingen te beoordelen. Elke vrijwilliger beoordeelde ongeveer 30 scenario's, een schaal van 1-4 gebruiken om aan te geven in hoeverre een van de 13 emoties in de beschrijving werd opgeroepen:amusement, woede, ontzag, minachting, walging, verlegenheid, angst, blijheid, interesse, trots, droefheid, schaamte, en verrassing.

Ze gebruikten de mediaanwaarde van elk scenario om het in te delen in een van die 13 emotiecategorieën. De onderzoekers riepen ook drie experts op om de 604 foto's te coderen met behulp van het Facial Action Coding System, die een reeks actie-eenheden specificeert die elk de beweging van een of meer gezichtsspieren vertegenwoordigen.

Volgens een lang gekoesterde hypothese, bepaalde emotiecategorieën worden consequent en specifiek uitgedrukt met bepaalde sets gezichtsbewegingen. Als dat het geval zou zijn, dan moeten alle scenariobeschrijvingen die zijn geclassificeerd als gevallen die een bepaalde emotiecategorie oproepen, overeenkomen met foto's die consequent een specifieke reeks gezichtsbewegingen weergeven.

Of, zoals Barrett zegt, "Als de gezichtsconfiguraties in kwestie - fronsen, lachend, fronsend, enzovoort - zijn uitdrukkingen die zijn geëvolueerd om specifieke emoties over te brengen, je zou beroemde acteurs moeten zien die fronsend poseren als ze woede en alleen woede uitbeelden, fronsen bij het uitbeelden van verdriet, enzovoort."

De onderzoekers voerden machine learning-analyses uit, waaruit bleek dat acteurs gevallen van dezelfde emotiecategorieën uitbeeldden door hun gezichten op verschillende manieren te verwringen. Ook, vergelijkbare gezichtshoudingen drukten niet op betrouwbare wijze dezelfde emotionele categorie uit.

Om te testen of gezichtsbewegingen, alleen, dragen emotionele informatie onafhankelijk van de context, de onderzoekers vroegen nog twee groepen vrijwilligers om de emotionele betekenis van elke gezichtshouding te beoordelen, hetzij wanneer alleen gepresenteerd of met het bijbehorende scenario.

De eerste groep, 842 mensen, beoordeeld ongeveer 30 gezichten elk. De tweede groep, 845 mensen, beoordeelde ongeveer 30 face-and-scenario-paren. Beide groepen werd gevraagd om te beoordelen in hoeverre hun gezichten of gezichts-en-scenario-paren tot elk van de 13 emotiecategorieën behoorden.

Als gezichtsbewegingen emotionele informatie bevatten, onafhankelijk van de context, dan zouden de beoordelingen van de gezichten alleen zeer vergelijkbaar moeten zijn met de beoordelingen van paren van gezichtsscenario's. Als de emotionele betekenis van gezichtsbewegingen voornamelijk voortkomt uit de context waarmee ze worden geassocieerd, dan zouden de initiële beoordelingen van de scenario's alleen meer lijken op de gezichtsscenario's.

De onderzoekers ontdekten dat de beoordelingen van mensen over gezichtshoudingen alleen niet betrouwbaar overeenkwamen met de beoordelingen van de gezichten toen ze met het scenario werden bekeken; ze kwamen ook niet overeen met de aangewezen emotiecategorie van het scenario. De emotionele betekenissen van de gezichtshoudingen kwamen voornamelijk voort uit de scenario's waarmee ze gepaard gingen, d.w.z., de context.

"De huidige bevindingen sluiten aan bij andere recente samenvattingen van het empirische bewijs om te suggereren dat fronsen, glimlacht, en andere gezichtsconfiguraties behoren tot een grotere, meer variabel repertoire van de betekenisvolle manieren waarop mensen hun gezicht bewegen om emoties uit te drukken, ', schrijven de onderzoekers.

Met andere woorden, Barrett zegt, "mensen leiden de betekenis van je glimlach af, en hun gevolgtrekkingen worden geïnformeerd door de context. Als het gaat om het uiten van emoties, een gezicht spreekt niet voor zich."

De bevindingen van de onderzoekers hebben implicaties voor het soort kunstmatig intelligente systemen waarvan sommige ingenieurs beweren dat ze iemands emotie kunnen ontcijferen door alleen hun gezichtsbewegingen te volgen.

Bedrijven gebruiken al AI-aangedreven systemen om de emoties van kinderen te meten terwijl ze leren, oordelen over potentiële sollicitanten, en raad eens naar de mogelijke snode bedoelingen van een vliegtuigpassagier.

"Ons onderzoek gaat rechtstreeks in tegen de traditionele emotionele AI-aanpak, " zegt Barrett. "Sommige bedrijven beweren dat ze algoritmen hebben die woede kunnen detecteren, bijvoorbeeld, terwijl wat ze echt hebben - onder optimale omstandigheden - algoritmen zijn die waarschijnlijk fronsen kunnen detecteren, wat al dan niet een uiting van woede kan zijn. Het is belangrijk om de beschrijving van een gezichtsconfiguratie niet te verwarren met gevolgtrekkingen over de emotionele betekenis ervan."