Après avoir introduit la prise en charge des photos et vidéos sphériques, Facebook a introduit en 2018 , qui vous permet de visualiser et de partager des photos 3D. Cependant, son fonctionnement dépend de la capacité du smartphone à prendre des photos stéréoscopiques à l'aide du matériel. Mais Facebook s'efforce de proposer ce nouveau format visuel à un plus grand nombre de personnes.
L'entreprise a utilisé des techniques d'apprentissage automatique pour créer des photos XNUMXD à partir de presque n'importe quelle image. Qu'il s'agisse d'une nouvelle photo prise sur un appareil Android ou iOS à l'aide d'un seul appareil photo standard, ou d'une photo prise il y a dix ans, Facebook peut la transformer en photo stéréo.
La création de la technologie nécessitait de surmonter de nombreux défis techniques, tels que la formation d'un modèle capable de déterminer correctement les positions XNUMXD d'une gamme extrêmement large d'objets et l'optimisation du système pour qu'il fonctionne sur des processeurs mobiles classiques en une fraction de seconde.
L’équipe a formé un réseau neuronal convolutif (CNN) sur des millions de paires d’images 3D entièrement accessibles au public et de cartes de profondeur associées, et a utilisé des méthodes d’optimisation précédemment développées par Facebook AI, FBNet et ChamNet. L'étape principale de formation du réseau neuronal a duré environ trois jours et a nécessité 800 GPU Tesla V100.
La nouvelle fonctionnalité Photos 3D peut déjà être testée dans l'application Facebook sur les smartphones iPhone et Android. Vous pouvez en apprendre davantage sur la création d'algorithmes et des exemples de leur travail dans .
Source: 3dnews.ru