Forskere har succes med at opdage, om billeder af ansigter blev manipuleret

Lav noget støj for Adobe i deres bestræbelser på at opdage forfalskninger. De frigjorde maskinlæringens kræfter til automatisk at registrere, når billeder af ansigter er blevet manipuleret.

Adobe AI adresserer falskneri ved hjælp af forskningsindsats sammen med forskere ved UC Berkeley.

Ryan Whitwam, ExtremeTech , sagde, at holdet brugte et Convolutional Neural Network.

Adobe Communications Team bloggede om deres træningsøvelse.

"Forskerne skabte et omfattende træningssæt af billeder ved at skrive Photoshop til at bruge Face Aware Liquify på tusindvis af billeder skrabet fra internettet. En undergruppe af disse billeder blev tilfældigt udvalgt til træning. Derudover, en kunstner blev hyret til at ændre billeder, der var blandet i datasættet. Dette element af menneskelig kreativitet udvidede rækken af ​​ændringer og teknikker, der blev brugt til testsættet, ud over de syntetisk genererede billeder."

Bloggen sagde, "Værktøjet identificerede også specifikke områder og metoder til skævvridning af ansigtet. I eksperimentet, værktøjet vendte ændrede billeder til beregning af deres oprindelige tilstand, med resultater, der imponerede forskerne."

Professor Alexei A. Efros, UC Berkeley, sagde, at selvom det kan lyde umuligt, fordi der er så mange variationer af ansigtsgeometri mulige, "I dette tilfælde, fordi deep learning kan se på en kombination af billeddata på lavt niveau, såsom vridende artefakter, såvel som signaler på højere niveau såsom layout, det ser ud til at virke."

Whitwam:"Detektionsværktøjet fremhæver områder af billedet, der ser ud til at være ændret, og det kan gå et skridt videre. Da træningen er baseret på et etableret Adobe-værktøj, AI kan vende redigeringerne for at give en meget god tilnærmelse af det originale billede."

Sådan virker det:Adobe har et Face Aware Liquify-værktøj, at lave tweaks til en persons ansigt i et billede (James Vincent kommenterede, at Photoshops Liquify-værktøj almindeligvis blev brugt til at justere formen på ansigter og ændre ansigtsudtryk). Det nye værktøj kan identificere, om Face Aware Liquify blev brugt.

Dette er et forsøg, men ingen magisk kugle. Det er bare et forskningsprojekt for øjeblikket, sagde Randen . James Vincent sagde, at Adobe delte den nye forskning i samarbejde med forskere fra UC Berkeley.

Whitwam:"Dette værktøj vil ikke være i stand til at detektere andet end Photoshop face liquify filter. Det vil kræve meget mere arbejde at skabe en AI, der kan tage højde for alle eller endda de fleste billedmanipulationsteknikker."

Ikke desto mindre, det er en forskningsindsats, der er værd at se.

"Mens den stadig var i de tidlige stadier, " bloggede Adobe Communications Team, "dette samarbejde mellem Adobe Research og UC Berkeley er et skridt i retning af at demokratisere billedforensik, videnskaben om at afdække og analysere ændringer i digitale billeder."

Avisen, der beskriver deres arbejde, er oppe på arXiv. Papiret, indsendt i denne måned, har titlen "Detecting Photoshopped Faces by Scripting Photoshop, " af Sheng-Yu Wang, Oliver Wang, Andrew Owens, Richard Zhang og Alexei Efros.

Adobes forskere er godt klar over, at med deres egne ord, "Rejsen med at demokratisere billedforensik er lige begyndt."

Vincent ind Randen rapporterede, at der ikke umiddelbart var planer om at gøre dette arbejde til et produkt. Vincent citerede en talsmand, der sagde, at det kun var en af ​​mange bestræbelser på tværs af Adobe for bedre at kunne detektere manipulationer - lige fra manipulationer i billedet, video, lyd og dokumenter.

Hvad var resultaterne af deres eksperiment? De testede nøjagtigheden af ​​det neurale netværk til at opfange manipulationer. "AI, trænet på manipulerede billeder, var i stand til at spotte det falske med 99 procent nøjagtighed, " sagde Whitwam. Interessant:Da han blev bedt om at se en prøve af redigerede ansigter, menneskelige frivillige fik det rigtige svar kun 53 procent af tiden, sagde Vincent.

Adobe Photoshop, trods alt, er et standard billedredigeringsværktøj og bruges ofte i ondsindede fotomanipulationer. Papiret diskuterede holdets metode til at opdage en meget populær Photoshop-manipulation - billedforvrængning anvendt på menneskelige ansigter, "ved at bruge en model, der udelukkende er trænet ved at bruge falske billeder, der blev genereret automatisk ved at skrive Photoshop selv."

Hvorfor deres forskning betyder noget:De viste, at (1) deres model klarede sig bedre end mennesker i at genkende manipulerede billeder (2) kan forudsige den specifikke placering af redigeringer og (3) i nogle tilfælde kan bruges til at "fortryde" en manipulation for at rekonstruere det uredigerede billede .

Lederen af ​​Adobe Research, Gavin Miller, i mellemtiden, sagde, at "Ud over teknologier som denne, det bedste forsvar vil være en sofistikeret offentlighed, der ved, at indhold kan manipuleres - ofte for at glæde dem, men nogle gange for at vildlede dem."

© 2019 Science X Network