Recente ontwikkelingen in computergraphics maken het mogelijk om door de computer gegenereerde (CG) representaties van mensen te creëren die moeilijk te onderscheiden zijn van hun echte tegenhangers. "Digitale detectie van menselijk gezicht in videosequenties via een fysiologische signaalanalyse, " een artikel dat vandaag in de Tijdschrift voor elektronische beeldvorming (JEI) , presenteert een innovatieve manier om onderscheid te maken tussen natuurlijke mensen (NAT) en CG-gezichten binnen de context van multimedia forensisch onderzoek, met behulp van de hartslag van individuen als onderscheidend kenmerk. JEI wordt mede uitgegeven door SPIE, de internationale vereniging voor optica en fotonica, en door de Society for Imaging Science and Technology (IS&T).

Mensen presenteren een pulssignaal dat automatisch kan worden geëxtraheerd uit een videosequentie; virtuele mensen niet. In hun krant Mattia Bonomi en Giulia Boato tonen aan dat door zich te concentreren op een algoritme voor het schatten van de hartslag van menselijke gezichten en het berekenen van statistieken van die hartslag, ze kunnen het invoervlak classificeren als CG of NAT.

"Recente ontwikkelingen op het gebied van machine learning en computergraphics hebben geleid tot de snelle ontwikkeling van 'deepfakes, ' waarbij het gezicht van een echte persoon in een video wordt vervangen door een door de computer gegenereerd exemplaar, " merkt op JEI hoofdredacteur Karén Egiazarian op. "Deze technologie is tegenwoordig openlijk beschikbaar, en, samen met het brede gebruik in de filmindustrie en advertenties, het is ook gebruikt door fraudeurs. Maar hoe onderscheid je een menselijk gezicht van een door een computer gegenereerd gezicht? Bonomi en Boato pakken deze vraag aan door een fysiologische signaalanalyse voor te stellen en toe te passen, het extraheren van de hartslag uit de video van het menselijk gezicht, en het gebruiken als een onderscheidende factor."

De auteurs van het artikel zijn Mattia Bonomi en Giulia Boato, beide van de Universiteit van Trento, Afdeling Ingenieurswetenschappen en Informatica, Trente, Italië.