Neuralt netværksbaseret software gør det muligt at kopiere dansebevægelser fra én person til en anden

Et lille team af forskere ved UC Berkeley har brugt neural-netværkssoftware til at skabe et program, der kopierer dansebevægelserne fra én person til en anden – så det ser ud som om den anden person danser. Holdet, med medlemmerne Caroline Chan, Shiry Ginosar, Tinghui Zhou og Alexei Efros, har skrevet et papir, der beskriver deres software og har lagt det ud på arXiv preprint server.

I løbet af de sidste mange måneder, videnskabelig forskning omkring brug af neural-netværksteknologi til at kortlægge en persons ansigt til en andens krop har ført til, hvad der er blevet kendt som "deepfake" videoer - i mange tilfælde, folk bruger en app til at kortlægge en berømtheds ansigtstræk på kroppen af ​​en pornoskuespiller, får det til at se ud som om berømtheden engagerer pornografi. I denne nye indsats, forskergruppen har udvidet den oprindelige forskning til at omfatte hele en persons krop – kopiering af en persons bevægelser til en anden, få det til at se ud, som om den anden person gør noget, de faktisk aldrig har gjort – i dette tilfælde, dans. Holdet har offentliggjort en video, der demonstrerer deres software.

Forskerne siger, at deres software overfører bevægelse fra én person til en anden. Det virker ved at gøre brug af to neurale (generative modstridende) netværk, video af en person, der danser, og video af en anden person, der bevæger sig rundt. Softwaren starter med at gøre personen i den første video til en animeret pindefigur. Næste, softwaren forvandler den anden persons bevægelser til en anden animeret pindefigur. Efter det, softwaren skifter bevægelserne mellem pindefigurerne, og derefter bliver den anden pindfigur forvandlet til anden person, efterligne første persons dansebevægelser. Forskerne har også inkluderet yderligere software for at få dansebevægelserne til at se glatte ud og for at sikre, at ansigtet forbliver klart.

Forskerne har ikke klarlagt formålet med softwaren, men det virker sandsynligt, at det vil blive lavet om til en app - en, der giver folk mulighed for at få sig selv til at se ud til at have professionelle dansebevægelser i deres egne videoer. Det synes også muligt, at en sådan app kunne bruges i andre mindre uskyldige scenarier, såvel.

© 2018 Tech Xplore