science >> Wetenschap >  >> Elektronica

Op neurale netwerken gebaseerde software maakt het kopiëren van dansbewegingen van de ene persoon naar de andere mogelijk

Bewegingsoverdracht van een bron naar twee doelonderwerpen. Krediet:arXiv:1808.07371 [cs.GR]

Een klein team van onderzoekers van UC Berkeley heeft neurale netwerksoftware gebruikt om een ​​programma te maken dat de dansbewegingen van de ene persoon naar de andere kopieert, waardoor het lijkt alsof de tweede persoon aan het dansen is. Het team, met leden Caroline Chan, Shiry Ginosar, Tinghui Zhou en Alexei Efros, heeft een paper geschreven waarin hun software wordt beschreven en heeft deze op de arXiv preprint-server.

De afgelopen maanden, wetenschappelijk onderzoek naar het gebruik van neurale netwerktechnologie om het gezicht van de ene persoon aan het lichaam van een ander te koppelen, heeft geleid tot wat bekend is geworden als 'deepfake'-video's - in veel gevallen mensen gebruiken een app om de gelaatstrekken van een beroemdheid in kaart te brengen op het lichaam van een pornoacteur, waardoor het lijkt alsof de beroemdheid bezig is met pornografie. In deze nieuwe poging de onderzoeksgroep heeft het oorspronkelijke onderzoek uitgebreid tot het hele lichaam van een persoon - het kopiëren van de bewegingen van de ene persoon naar de andere, waardoor het lijkt alsof de tweede persoon iets doet wat ze nog nooit hebben gedaan - in dit geval dansen. Het team heeft een video geplaatst waarin hun software wordt gedemonstreerd.

De onderzoekers zeggen dat hun software beweging van de ene persoon naar de andere overdraagt. Het werkt door gebruik te maken van twee neurale (generatieve vijandige) netwerken, video van één persoon die danst, en video van een tweede persoon die rondloopt. De software begint met het veranderen van de persoon in de eerste video in een geanimeerd stokfiguur. Volgende, de software verandert de bewegingen van de tweede persoon in een tweede geanimeerd stokfiguur. Daarna, de software wisselt de bewegingen tussen de stokfiguren en vervolgens wordt de tweede stokfiguur getransformeerd in de tweede persoon, het nabootsen van de dansbewegingen van de eerste persoon. De onderzoekers hebben ook extra software toegevoegd om de dansbewegingen er vloeiend uit te laten zien en ervoor te zorgen dat het gezicht helder blijft.

De onderzoekers hebben het doel van de software niet duidelijk gemaakt, maar het lijkt waarschijnlijk dat er een app van zal worden gemaakt, een app waarmee mensen in hun eigen video's de indruk kunnen wekken dat ze professionele danspasjes hebben. Het lijkt ook mogelijk dat een dergelijke app in andere, minder onschuldige scenario's kan worden gebruikt, ook.

© 2018 Tech Xplore