Au existat o mulțime de platforme nebunești cu mai multe camere create cu scopul de a captura videoclipuri spațiale complete.  Îmi amintesc o conversație la Meta care a fost practic "ne vom baza cât mai mult posibil pe viziunea geometrică clasică pe computer înainte de a ne uita la algoritmii de învățare automată" și am susținut această direcție. Asta s-a întâmplat cu mulți ani în urmă, când ML încă se simțea ca o alchimie imprevizibilă și, desigur, vrei să-ți maximizezi utilizarea adevărului de bază! Efortul de inginerie a fost folosit în calibrarea camerei, sincronizarea și procesarea datelor, dar nu a livrat niciodată cu adevărat viziunea. Indiferent de câte camere ai, orice obiect complex în mișcare va avea zone ocluzate, iar "găurile din realitate" ies în evidență pentru un privitor nu tocmai într-unul dintre punctele camerei. Chiar și atunci când aveți o vizibilitate bună, ambiguitățile din fotogrammetria cu mai multe camere fac lucrurile mai puțin precise decât v-ați dori. Au existat și câteva experimente pentru a vedea cât de bine poți face reconstrucția scenei 3D de la camerele Quest folosind calculul offline, iar răspunsul a fost încă "nu foarte bun", cu suprafețe destul de aglomerate. O mulțime de reconstrucții 3D arată uimitor derulând în fluxul de pe telefon, dar nu atât de bine într-o redare VR complet imersivă și pusă în contrast cu o fotografie tradițională de înaltă calitate. Aveți nevoie de priori puternici pentru a rezolva problema de montare și pentru a umple golurile de acoperire. Pentru scenele arhitecturale, puteți obține ceva kilometraj din priorii planari simpli, dar AI generativă modernă este priorul suprem. Chiar dacă platformele nebunești de cameră și-ar fi îndeplinit pe deplin promisiunea, tot nu ar fi permis un ecosistem de conținut bun. YouTube nu ar fi reușit dacă fiecare creator ar fi avut nevoie de o cameră RED Digital Cinema. Generarea de fotografii 3D stereoscopice (destul de bune!) din Quest Instagram este un pas mic spre viitor. Există căi către video stereo și static 6DOF, apoi în cele din urmă către video 6DOF. Faceți totul captivant, apoi permiteți reglarea personalizată a mediilor captivive.
162,32K