Po wprowadzeniu obsługi zdjęć i filmów sferycznych, w 2018 roku Facebook wprowadził tę funkcję , która umożliwia przeglądanie i udostępnianie zdjęć 3D. Jego działanie uzależnione jest jednak od możliwości robienia przez smartfon zdjęć stereoskopowych za pomocą sprzętu. Facebook pracuje jednak nad udostępnieniem tego nowego formatu wizualnego większej liczbie osób.
Firma wykorzystała techniki uczenia maszynowego do tworzenia zdjęć XNUMXD z niemal dowolnego obrazu. Niezależnie od tego, czy jest to nowe zdjęcie zrobione właśnie na urządzeniu z systemem Android lub iOS przy użyciu standardowego pojedynczego aparatu, czy zdjęcie sprzed dziesięciu lat, Facebook może przekształcić je w zdjęcie stereo.
Stworzenie technologii wymagało pokonania wielu wyzwań technicznych, takich jak wytrenowanie modelu, który potrafił poprawnie określić położenie XNUMXD niezwykle szerokiej gamy obiektów oraz optymalizacja systemu do pracy na typowych procesorach mobilnych w ułamku sekundy.
Zespół wytrenował splotową sieć neuronową (CNN) na milionach par w pełni rozwiniętych, publicznie dostępnych obrazów 3D i towarzyszących im map głębi, a także wykorzystał metody optymalizacji opracowane wcześniej przez Facebook AI, FBNet i ChamNet. Główny etap szkolenia sieci neuronowej trwał około trzech dni i wymagał użycia 800 procesorów graficznych Tesla V100.
Nową funkcję Zdjęcia 3D można już wypróbować w aplikacji Facebook na smartfonach iPhone i Android. Więcej o tworzeniu algorytmów i przykładach ich działania można dowiedzieć się w .
Źródło: 3dnews.ru