science >> Wetenschap >  >> Elektronica

Onderzoekers hebben succes bij het detecteren of afbeeldingen van gezichten zijn gemanipuleerd

Krediet:arXiv:1906.05856 [cs.CV]

Maak wat lawaai voor Adobe in zijn poging om vervalsing te detecteren. Ze ontketenden de kracht van machine learning om automatisch te detecteren wanneer afbeeldingen van gezichten zijn gemanipuleerd.

Adobe AI pakt vervalsing aan met behulp van onderzoeksinspanningen samen met wetenschappers van UC Berkeley.

Ryan Whitwam, ExtremeTech , zei dat het team een ​​convolutioneel neuraal netwerk gebruikte.

Het Adobe Communications Team blogde over hun trainingsoefening.

"De onderzoekers hebben een uitgebreide trainingsset met afbeeldingen gemaakt door Photoshop te scripten om Face Aware Liquify te gebruiken op duizenden afbeeldingen die van internet zijn geschraapt. Een subset van die foto's werd willekeurig gekozen voor training. Bovendien, een kunstenaar werd ingehuurd om afbeeldingen te wijzigen die in de dataset waren gemengd. Dit element van menselijke creativiteit verbreedde het scala aan aanpassingen en technieken die voor de testset werden gebruikt buiten de synthetisch gegenereerde afbeeldingen."

De blog zei, "De tool identificeerde ook specifieke gebieden en methoden van gezichtsvervorming. In het experiment, de tool heeft gewijzigde afbeeldingen teruggezet naar de berekening van hun oorspronkelijke staat, met resultaten die indruk maakten op de onderzoekers."

Professor Alexei A. Efros, UC Berkeley, zei dat hoewel het misschien onmogelijk klinkt omdat er zoveel variaties in gezichtsgeometrie mogelijk zijn, "in dit geval, omdat deep learning kan kijken naar een combinatie van afbeeldingsgegevens op laag niveau, zoals kromtrekkende artefacten, evenals signalen van een hoger niveau, zoals lay-out, het lijkt te werken."

Whitwam:"De detectietool markeert delen van de afbeelding die lijken te zijn gewijzigd en kan een stap verder gaan. Omdat de training is gebaseerd op een gevestigde Adobe-tool, de AI kan de bewerkingen ongedaan maken om een ​​zeer goede benadering van de originele foto te produceren."

Hoe het werkt:Adobe heeft een Face Aware Liquify-tool, om iemands gezicht in een foto aan te passen (James Vincent merkte op dat het gereedschap Uitvloeien van Photoshop vaak werd gebruikt om de vorm van gezichten aan te passen en gezichtsuitdrukkingen te veranderen). De nieuwe tool kan identificeren of Face Aware Liquify is gebruikt.

Dit is één poging, maar geen wondermiddel. Het is op dit moment slechts een onderzoeksproject, zei De rand . James Vincent zei dat Adobe het nieuwe onderzoek deelde in samenwerking met wetenschappers van UC Berkeley.

Whitwam:"Deze tool zal niets anders kunnen detecteren dan het Photoshop face liquify filter. Het zal veel meer werk vergen om een ​​AI te maken die alle of zelfs de meeste beeldmanipulatietechnieken aankan."

Niettemin, het is een onderzoeksinspanning die het bekijken waard is.

"Hoewel nog in de beginfase, " blogde het Adobe Communications Team, "deze samenwerking tussen Adobe Research en UC Berkeley is een stap in de richting van het democratiseren van beeldforensisch onderzoek, de wetenschap van het ontdekken en analyseren van veranderingen in digitale beelden."

De paper waarin hun werk wordt beschreven, staat op arXiv. De krant, deze maand ingediend, is getiteld "Gephotoshopte gezichten detecteren door Photoshop te scripten, " door Sheng-Yu Wang, Olivier Wang, Andrew Owens, Richard Zhang en Alexei Efros.

De onderzoekers van Adobe zijn zich er terdege van bewust dat, in hun eigen woorden, "De reis van het democratiseren van beeldforensisch onderzoek is nog maar net begonnen."

Vincent in De rand meldde dat er geen onmiddellijke plannen waren om van dit werk een product te maken. Vincent citeerde een woordvoerder, die zei dat het slechts een van de vele pogingen van Adobe was om manipulaties beter te detecteren, variërend van manipulaties in beeld, video, geluid en documenten.

Wat waren de resultaten van hun experiment? Ze testten de nauwkeurigheid van het neurale netwerk bij het oppikken van manipulaties. "De AI die op gemanipuleerde foto's was getraind, kon de nep met een nauwkeurigheid van 99 procent detecteren, " zei Whitwam. Interessant:toen hem werd gevraagd om een ​​voorbeeld van bewerkte gezichten te spotten, menselijke vrijwilligers kregen slechts 53 procent van de tijd het juiste antwoord, zei Vincent.

Adobe-Photoshop, ten slotte, is een standaard tool voor het bewerken van afbeeldingen en wordt vaak gebruikt bij kwaadaardige fotomanipulaties. Het artikel besprak de methode van het team voor het detecteren van een zeer populaire Photoshop-manipulatie:beeldvervorming toegepast op menselijke gezichten, "met behulp van een model dat volledig is getraind met nepafbeeldingen die automatisch zijn gegenereerd door Photoshop zelf te scripten."

Waarom hun onderzoek ertoe doet:ze toonden aan dat (1) hun model beter presteerde dan mensen bij het herkennen van gemanipuleerde afbeeldingen (2) de specifieke locatie van bewerkingen kan voorspellen en (3) in sommige gevallen kan worden gebruikt om een ​​manipulatie ongedaan te maken om de onbewerkte afbeelding te reconstrueren .

Het hoofd van Adobe Research, Gavin Miller, In de tussentijd, zei dat "Buiten technologieën als deze, de beste verdediging zal een geavanceerd publiek zijn dat weet dat inhoud kan worden gemanipuleerd - vaak om ze te plezieren, maar soms om ze te misleiden."

© 2019 Wetenschap X Netwerk