Virtual reality bliver mere virkelig

Forskere fra Skoltech ADASE (Advanced Data Analytics in Science and Engineering) laboratoriet har fundet en måde at forbedre dybdekortopløsningen på, hvilket skulle gøre virtual reality og computergrafik mere realistisk. De præsenterede deres forskningsresultater på den prestigefyldte International Conference on Computer Vision 2019 i Korea.

Når du tager et billede, vi fanger visuel information om genstande omkring os, med de forskellige pixels i billedet, der indeholder farverne på de respektive dele af objektet. Dybdekort er billeder, der fanger rumlig information, og deres pixels indeholder afstandene fra kameraet til de respektive punkter i rummet. Applikationer såsom computergrafik og augmented eller virtual reality bruger rumlig information til at rekonstruere et 3-D objekts form og, for eksempel, vise det på en computerskærm.

Et af problemerne med dybdekameraer er, at deres opløsning, det er, den rumlige frekvens af afstandsmålinger, er utilstrækkelig til at genskabe objektets højkvalitetsform, får de virtuelle rekonstruktioner til at se næsten urealistiske ud.

Forskerne står over for udfordringen med at finde en måde at opnå højopløselige dybdekort fra lavopløselige dybdekort.

Forskere fra Skoltech ADASE-laboratoriet har foreslået at vurdere rekonstruktionskvaliteten ved hjælp af en ny metode, der er tæt forbundet med menneskelig perception. Træning af et kunstigt neuralt netværk med denne kvalitetsvurderingsteknik producerer en dybdekort-superopløsningsmetode, der stort set overgår de eksisterende metoder i den visuelle kvalitet af resultatet.

"Når vi har at gøre med superopløste dybdekort, man bør vurdere kvaliteten af ​​resultatet for først at sammenligne ydeevnen af ​​forskellige metoder, og, for det andet, at bruge det som feedback til yderligere forbedringer. Den nemmeste måde er at sammenligne resultatet med en reference. Det overvældende flertal af værker om brug af dybdekort med superopløsning til dette formål betyder forskellen mellem superopløste og referencedybdeværdier. Denne metode afspejler på ingen måde den visuelle kvalitet af 3D-rekonstruktionen opnået fra det superopløste dybdekort, " forklarer den første forfatter af undersøgelsen, Oleg Voynov.

"Vi foreslår en helt anden metode, som udnytter den menneskelige opfattelse af forskellen mellem visualiseringer af 3-D-rekonstruktioner opnået fra superopløste og referencedybdekort. Den grafik, du opnår med denne metode, ser meget realistisk ud. Vi håber, at vores metode vil finde udstrakt brug, " siger en af ​​udviklerne, Alexey Artemov.