Tato neurální síť detekuje, zda byly plochy aplikovány ve Photoshopu

Používání Photoshopu a další software pro zpracování obrazu, který nahrazuje tváře na fotografiích, se stal běžnou praxí, ale není vždy jasné, kdy je hotovo. Vědci z Berkeley a Adobe vyvinuli nástroj, který dokáže nejen zjistit, kdy byla fotografie pořízena pomocí Photoshopu, ale také navrhnout, jak ji získat zpět.

Okamžitě je třeba poznamenat, že tento projekt se týká pouze úprav aplikace Photoshop, zejména těch, které byly provedeny pomocí funkce „Face Detection Liquify“, která umožňuje jemné a velké úpravy mnoha rysů obličeje. Univerzální skenovací nástroj je daleko, ale to je jen začátek.

Vědci (včetně Alexeje Efrose, který byl nedávno uveden na naší akci AI + Robotics) předpokládali, že většina zpracování obrazu byla prováděna pomocí populárních nástrojů, jako je Adobe, a dobrým začátkem jsou zejména možné manipulace s těmito nástroji.

Vypracovali scénář pro pořizování portrétů a různými způsoby s ním manipulovali: trochu pohnuli očima a zdůraznili úsměv, zúžili tváře a nos, podobné věci. Poté poskytli originály a zkreslené verze modelu kolektivního strojového učení v naději, že se naučí rozlišovat mezi nimi.

Zjistil jsem, že je to dobré a je to docela dobré. Když lidé dostali obrázky a zeptali se, který z nich byl nahrazen, vedli o něco lépe než štěstí. Ale trénovaná neurální síť detekovala manipulované obrazy 99% času.

Co vidíš? Možná malé vzory v optickém toku obrazu, které lidé opravdu nedokážou detekovat. A tytéž malé vzory také přesně naznačují, jaké manipulace byly provedeny, což vám umožňuje navrhnout „vrácení“ manipulací, aniž byste vůbec viděli originál.

Vzhledem k tomu, že jste omezeni na tváře změněné tímto nástrojem Photoshopu, neočekávejte, že tento výzkum bude představovat významnou bariéru pro zlé síly manipulující se škodlivými tvářemi zleva doprava. Ale toto je jen jeden z mnoha malých začátků v rostoucí digitální oblasti forenzní techniky.

“Žijeme ve stále obtížnějším světě, abychom se mohli spolehnout na digitální informace, které konzumujeme, a těším se na další zkoumání této oblasti výzkumu,” řekl Richard Zhang z Adobe, který na projektu pracoval.

Můžete si přečíst dokument vysvětlující projekt a zkontrolovat kód zařízení na stránce projektu.