Pärast sfääriliste fotode ja videote toe juurutamist tutvustas Facebook 2018. aastal , mis võimaldab vaadata ja jagada 3D-fotosid. Selle toimimine sõltub aga nutitelefoni võimest teha riistvara abil stereoskoopilisi pilte. Kuid Facebook töötab selle nimel, et tuua see uus visuaalne formaat rohkemate inimesteni.
Ettevõte kasutas masinõppe tehnikaid, et luua 3D-fotosid peaaegu igast pildist. Olgu see uus foto, mis on tehtud äsja Android- või iOS-seadmega, kasutades tavalist ühe kaamerat, või kümne aasta tagune foto, Facebook saab muuta selle stereofotoks.
Tehnoloogia loomine nõudis paljude tehniliste väljakutsete ületamist, näiteks sellise mudeli väljaõpetamist, mis suudaks õigesti määrata väga paljude objektide 3D-asundeid, ja süsteemi optimeerimist nii, et see töötaks tüüpilistel mobiilsetel protsessoritel sekundi murdosa jooksul.
Meeskond koolitas konvolutsioonilist närvivõrku (CNN) miljonite täisväärtuslike avalikult kättesaadavate 3D-piltide paaride ja nendega kaasnevate sügavuskaartide põhjal ning kasutas optimeerimismeetodeid, mille olid eelnevalt välja töötanud Facebook AI, FBNet ja ChamNet. Närvivõrgu koolituse põhietapp kestis ligikaudu kolm päeva ja nõudis 800 Tesla V100 GPU-d.
Uut 3D-fotode funktsiooni saab iPhone'i ja Androidi nutitelefonide Facebooki rakenduses juba proovida. Lisateavet algoritmide loomise ja nende töö näidete kohta saate lugeda .
Allikas: 3dnews.ru