Google a folosit videoclipuri youtube din provocarea manechinului pentru a-și antrena aria

Cuprins:

Ce trebuie sa stii
Obțineți mai multe pixeli 3a
Google Pixel 3a

Ce trebuie sa stii

Google își pregătește AI-ul pentru a crea hărți de adâncime care să izoleze subiecți umani în scenă folosind doar o cameră foto.
Ca punct de plecare, Google a folosit 2000 de videoclipuri YouTube din Mannequin Challenge pentru a instrui AI.
Rezultatele vor duce la posibilitatea de a adăuga efecte la videoclipuri, cum ar fi modul portret, și de a fi utilizate pentru Realitate augmentată.

Într-o postare recentă pe blog, Google a detaliat modul în care a funcționat percepția în profunzime în videoclipurile în care se mișcă atât camera, cât și subiectul. Ca punct de plecare, studiul a avut nevoie de acces la o cantitate vastă de date pentru a antrena IA, iar primul pas logic a fost pregătirea acesteia pentru a detecta oamenii într-o scenă în care camera se mișca, dar oamenii erau statici.

După cum se dovedește, Google a avut resursa perfectă pentru aceste date sub forma unor videoclipuri YouTube care au fost filmate pentru Mannequin Challenge. În această provocare, o persoană sau un grup de oameni ar sta complet nemișcați ca o cameră înfășurată în jurul poziției lor. Google a folosit 2000 de videoclipuri din provocare pentru a ajuta instruirea AI pentru a detecta figuri umane într-o varietate de scene diferite.

Ceva care face acest studiu și mai interesant este faptul că Google își învață AI-ul să creeze hărți de adâncime folosind imagini filmate folosind doar o cameră foto. De cele mai multe ori, mai multe camere trebuie utilizate pentru a sesiza informațiile de adâncime într-o scenă.

Google folosește deja ceva similar pentru imagini statice pentru a-și crea efectul de mod portret pe telefoanele Pixel. Cu toate acestea, aceasta se referă doar la imagini statice. Noua metodă pe care Google o dezvoltă este pregătirea AI-ului pentru crearea unei hărți de profunzime în care atât camera cât și subiectul se mișcă în interiorul unei scene.

Ramificându-vă în videoclipuri, în viitor va deschide funcții pentru crearea de bokeh în scene video similare modului portret pe telefon. Un alt beneficiu care va rezulta din acest studiu va fi rezultatele îmbunătățite pentru realitatea augmentată, cum ar fi Playmojis de pe Google Playground.

O altă posibilitate va fi generarea de imagini 3D din scene 2D. Deși hardware-ul camerei a fost întotdeauna esențial pentru fotografie și videografie, ceea ce Google a făcut de-a lungul anilor cu ajutorul software-ului arată că, în viitor, algoritmii vor fi la fel de importanți și vor ajuta la furnizarea de noi experiențe.