Facebook 3D Photos pridáva rozmer každej fotografii

Po zavedení podpory pre sférické fotografie a videá predstavil Facebook v roku 2018 funkcie, ktorá vám umožňuje prezerať a zdieľať 3D fotografie. Jeho fungovanie však závisí od schopnosti smartfónu zhotovovať stereoskopické snímky pomocou hardvéru. Facebook však pracuje na tom, aby tento nový vizuálny formát priniesol viacerým ľuďom.

Facebook 3D Photos pridáva rozmer každej fotografii

Spoločnosť použila techniky strojového učenia na vytvorenie XNUMXD fotografií z takmer akéhokoľvek obrázka. Či už ide o novú fotografiu práve nasnímanú na zariadení so systémom Android alebo iOS pomocou štandardného jediného fotoaparátu, alebo fotografiu spred desiatich rokov, Facebook ju dokáže premeniť na stereo fotografiu.

Vytvorenie technológie si vyžadovalo prekonanie mnohých technických výziev, ako napríklad trénovanie modelu, ktorý by dokázal správne určiť XNUMXD polohy extrémne širokého spektra objektov, a optimalizáciu systému tak, aby bežal na typických mobilných procesoroch za zlomok sekundy.

Tím trénoval konvolučnú neurónovú sieť (CNN) na miliónoch párov plne plnohodnotných verejne dostupných 3D obrázkov a sprievodných hĺbkových máp a použil optimalizačné metódy, ktoré predtým vyvinuli Facebook AI, FBNet a ChamNet. Hlavná fáza trénovania neurónovej siete trvala približne tri dni a vyžadovala 800 Tesla V100 GPU.

Novú funkciu 3D Fotky si už môžete vyskúšať v aplikácii Facebook na smartfónoch iPhone a Android. Viac o tvorbe algoritmov a príkladoch ich práce sa dozviete v firemný blog.



Zdroj: 3dnews.ru

Pridať komentár