Nach der Einführung der Unterstützung für sphärische Fotos und Videos führte Facebook 2018 die Einführung ein , mit dem Sie 3D-Fotos anzeigen und teilen können. Die Funktionsweise hängt jedoch von der Fähigkeit des Smartphones ab, mithilfe der Hardware stereoskopische Bilder aufzunehmen. Aber Facebook arbeitet daran, dieses neue visuelle Format mehr Menschen zugänglich zu machen.
Das Unternehmen nutzte Techniken des maschinellen Lernens, um aus fast jedem Bild 3D-Fotos zu erstellen. Ganz gleich, ob es sich um ein neues Foto handelt, das gerade mit der Standard-Einzelkamera auf einem Android- oder iOS-Gerät aufgenommen wurde, oder um ein Foto von vor einem Jahrzehnt – Facebook kann es in ein Stereofoto umwandeln.
Die Entwicklung der Technologie erforderte die Bewältigung zahlreicher technischer Herausforderungen, beispielsweise das Trainieren eines Modells, das die 3D-Positionen einer extrem breiten Palette von Objekten korrekt bestimmen konnte, und die Optimierung des Systems für die Ausführung auf typischen Mobilprozessoren in Sekundenbruchteilen.
Das Team trainierte ein Faltungs-Neuronales Netzwerk (CNN) anhand von Millionen Paaren vollwertiger, öffentlich verfügbarer 3D-Bilder und begleitender Tiefenkarten und verwendete Optimierungsmethoden, die zuvor von Facebook AI, FBNet und ChamNet entwickelt wurden. Die Hauptphase des Trainings des neuronalen Netzwerks dauerte etwa drei Tage und erforderte 800 Tesla V100-GPUs.
Die neue 3D-Fotos-Funktion kann bereits in der Facebook-App auf iPhone und Android-Smartphones ausprobiert werden. Mehr über die Erstellung von Algorithmen und Beispiele ihrer Arbeit erfahren Sie in .
Source: 3dnews.ru