Pixel 3:En tur til maskinlæring for at få dybdeestimater

TechSpot siger, hvad den synes om Pixel 3, og det er ikke en annonce:"Pixel 3 er muligvis den bedste kameratelefon på markedet." Tyler Lee ind Ubergizmo er i fuld komplimenttilstand. "Der er ingen tvivl om, at alt Googles hårde arbejde og forskning har båret frugt, da Pixel 3 har et af de bedre kameraer, der findes."

OKAY, vi forstår det. I den evigt stødende leverandørkamp for at overmande smartphonemarkedet, Pixel 3 markerer med succes sin egen græsbane som telefonen med meget gode kameraegenskaber. Og, nu, en nylig blog på Google AI-bloggen vil kun glæde Pixel 3-fans yderligere, da den beskriver, hvordan "Portrættilstand" blev opnået på Pixel 3.

Tænk på et team, der vender sig til maskinlæring, TensorFlow og dybde-perception mål til nine.

Scott Adam Gordon ind Android Authority delte med læserne, hvad der var ret smart ved Googles tilgang og teknikker. "Med Google Pixel 3's kamera, Google inkluderede flere dybdepunkter for at informere om denne sløringseffekt for større nøjagtighed. Samt parallakse, Google brugte skarphed som en dybdeindikator – fjernere objekter er mindre skarpe end tættere objekter – og objektidentifikation i den virkelige verden. For eksempel, kameraet kunne genkende en persons ansigt i en scene, og regne ud, hvor tæt eller langt det var baseret på dets antal pixels i forhold til objekter omkring det. "

Rahul Garg, forsker og Neal Wadhwa, software ingeniør, har lagt bloggen op. "Dette år, på Pixel 3, vi henvender os til maskinlæring for at forbedre dybdeestimering for at producere endnu bedre resultater i portrættilstand."

(Google har hidtil holdt magien for sig selv, sagde Isaiah Mayersen ind TechSpot . "Når Google fortsætter med at bane vejen inden for smartphonefotografering, vi må vente og se, hvad konkurrenterne bringer til bordet.")

Vente, hvad er portrættilstand? Webopedia , tak skal du have:

"I fotografi og digital fotografering, portrættilstand er en funktion af det digitale kamera, der bruges, når du tager billeder af et enkelt motiv. Når du tager billeder i portrættilstand, digitalkameraet bruger automatisk en stor blændeåbning til at hjælpe med at holde baggrunden ude af fokus ved at bruge en smal dybdeskarphed, så det motiv, der fotograferes, er det eneste, der er i fokus."

Ikke kun det enkelte motiv, men mere:"Ikke kun vil personen i portrættet være i fokus, genstande nær det samme fokusplan vil også være skarpere, med en realistisk stigende sløring, efterhånden som genstande er længere foran og bagved det fly, " sagde Ryne Hager ind Android politi .

Forstået? Baggrund bevidst ude af fokus; motivet bærer den maksimale effekt i fokus. Denne teknik, hvis den ofte bruges i annoncer og reklamebudskaber for at henlede maksimal opmærksomhed på et ansigt ved at sløre baggrunden.

Google havde brug for nogle billeder for at træne sin AI. Indtast som 5-telefonklump – ok, mere høfligt sagt, en samling af fem telefoner. De talte om dybdekort, træningsdata og denne samling, "Frankenphone, "en rig med 5 telefoner, alle Pixel 3, og Wi-Fi-baseret løsning.

CNET beskrev Frankenphone. "En kvintet telefoner, der er klemt sammen, genererede dataene for at træne Pixel 3 i at vurdere dybden." Stephen Shankland beskrev en "sammenhakket klump af fem telefoner for at forbedre, hvordan funktionen fungerede i dette års Pixel 3."

De brugte TensorFlow Lite, en løsning på tværs af platforme til at køre maskinlæringsmodeller på mobile og indlejrede enheder, og Pixel 3's GPU til hurtigt at beregne dybde. Derefter, de kombinerede resulterende dybdevurderinger med masker fra deres "personsegmenteringsneurale netværk for at producere smukke portrættilstandsresultater."

Hvorfor dette betyder noget, kræver ikke meget analyse:flottere portrætbilleder.

I det større billede af smartphones til at tage billeder, Sælgere accepterer, at deres salgsargument bedst kunne indeholde fristende kamerafunktioner. Googles computerfotograferingsmetoder kan give Pixel en reel fordel. "Smartphones har små billedsensorer, der ikke kan konkurrere med traditionelle kameraer om billedkvalitet, men Google er foran flokken med computerfotograferingsmetoder, der kan gøre ting som sløre baggrunde, øge opløsningen, justere eksponeringen, forbedre skyggedetaljer og tag billeder i mørke, " sagde Stephen Shankland, CNET.

© 2018 Science X Network