Після впровадження підтримки сферичних фотографій та відеороликів Facebook представила у 2018 році , що дозволяє переглядати та публікувати 3D-фотографії. Однак її робота залежить від можливості смартфона робити стереоскопічні знімки апаратними засобами. Але Facebook працює на тому, щоб донести цей новий візуальний формат до більшої кількості людей.
Компанія задіяла методи машинного навчання для створення тривимірних фотографій практично з будь-якого зображення. Будь то нова фотографія, щойно зроблена на пристрої Android або iOS за допомогою стандартної одиночної камери, або фотографія десятирічної давності - Facebook може перетворити її на стереознімок.
Створення технології зажадало подолання безлічі технічних проблем, таких як навчання моделі, яка б правильно визначала тривимірні позиції надзвичайно широкого спектру об'єктів, та оптимізація системи для роботи на типових мобільних процесорах за секунду.
Фахівці навчили згорткову нейронну мережу (CNN) на мільйонах пар повноцінних 3D-зображень, що знаходяться у відкритому доступі, та супроводжують їх карт глибини та використовували раніше розроблені Facebook AI методи оптимізації FBNet та ChamNet. Основний етап тренування нейромережі зайняв приблизно три дні та зажадав 800 графічних процесорів Tesla V100.
Нову функцію 3D Photos вже можна випробувати у додатку Facebook на смартфонах iPhone та Android. Докладніше ознайомитися зі створенням алгоритмів та прикладами їх роботи можна в .
Джерело: 3dnews.ru