Na de introductie van ondersteuning voor bolvormige foto's en video's, introduceerde Facebook dit in 2018 , waarmee u 3D-foto's kunt bekijken en delen. De werking ervan hangt echter af van het vermogen van de smartphone om stereoscopische foto's te maken met behulp van hardware. Maar Facebook werkt eraan om dit nieuwe visuele formaat voor meer mensen beschikbaar te maken.
Het bedrijf gebruikte machine learning-technieken om van vrijwel elke afbeelding XNUMXD-foto's te maken. Of het nu een nieuwe foto is die zojuist op een Android- of iOS-apparaat is gemaakt met de standaard enkele camera, of een foto van tien jaar geleden, Facebook kan er een stereofoto van maken.
Voor het creëren van de technologie moesten veel technische uitdagingen worden overwonnen, zoals het trainen van een model dat de XNUMXD-posities van een extreem breed scala aan objecten correct kon bepalen, en het optimaliseren van het systeem zodat het in een fractie van een seconde op typische mobiele processors kon draaien.
Het team trainde een convolutioneel neuraal netwerk (CNN) op miljoenen paren volwaardige, openbaar beschikbare 3D-beelden en bijbehorende dieptekaarten, en gebruikte optimalisatiemethoden die eerder waren ontwikkeld door Facebook AI, FBNet en ChamNet. De hoofdfase van het trainen van het neurale netwerk duurde ongeveer drie dagen en vereiste 800 Tesla V100 GPU's.
De nieuwe functie 3D-foto's kan al worden uitgeprobeerd in de Facebook-app op iPhone- en Android-smartphones. U kunt meer leren over het maken van algoritmen en voorbeelden van hun werk in .
Bron: 3dnews.ru