NVIDIA derin öğrenme alanında aktif olarak deneyler yapıyor ve çalışmalarının sonuçları bazen oldukça ilginç oluyor. Şirket, GDC 2019'da basit çizimlerin fotogerçekçi versiyonlarını oluşturmak için derin öğrenme modelini kullanan akıllı çizim uygulaması GauGAN'ın yaratıldığını duyurdu. Uygulamanın adı, Fransız post-empresyonist sanatçı Paul Gauguin'e ve yazılımın, resimleri gerçekçi bir şekilde taklit eden görüntüler oluşturmak için üretken rakip ağları (GAN'ler) kullanmasına atıfta bulunuyor.
GauGAN nasıl çalışır? Şirketin açıklamasına göre uygulama, kullanıcının taslağının ayrıntılarını dolduran bir "akıllı fırça" gibi (NVIDIA buna "segmentasyon haritası" diyor). Temel olarak kullanıcı veya sanatçı, sonuçta görmek istediği şey için bir plan hazırlar ve her bir bölümü, ne olması gerektiğini belirterek etiketler. GauGAN daha sonra işi devralarak ek ayrıntıları doldurur ve çizimleri daha gerçekçi hale getirir.
Milyonlarca sanatsal görüntü üzerinde eğitilen derin öğrenme modeli, daha sonra manzarayı etkileyici (ancak her zaman mükemmel olmayan) sonuçlarla doldurur. Bir gölet çizerseniz yakındaki ağaçlar ve kayalar gibi unsurlar suya yansıtılacaktır. Segment etiketini "çimen" yerine "kar" olarak değiştirmek yeterlidir ve görüntünün tamamı değişecek, kışa dönüşecek ve yapraklı ağaçlar çıplak hale gelecektir. Neden bahsettiğimizi anlamak için aşağıdaki videoyu izleyebilirsiniz.
GauGAN'ın son çalışmaları oluşturmak için bir dizi başka görsele dayanan kapsamlı bilgi kullanmasına rağmen, uygulama tamamen yeni sonuçtaki görseller ürettiğinden ikincisinin hala orijinal olarak kabul edildiğini belirtmekte fayda var.
NVIDIA'nın yeni akıllı grafik düzenleyicisi yalnızca doğal sahneler veya manzaralarla sınırlı değildir; uygulama binaları, yolları ve hatta insanları ekleyebilir. GauGAN ayrıca kullanıcıların filtre uygulamalarına ve sonucu istedikleri stile uyacak şekilde şekillendirmelerine olanak tanır. Bu tür filtreler, diğer şeylerin yanı sıra, belirli bir sanatçının (örneğin, Van Gon) tarzını taklit edebilir veya bir sahnenin aydınlatmasını ayarlayarak görüntüleri gündüzden geceye değiştirebilir.
GauGAN'ın günlük tüketici kullanımına sunulup sunulmayacağı belli değil, ancak er ya da geç sıradan kullanıcıların mimari ve illüstrasyondan oyun geliştirmeye kadar çeşitli alanlarda çalışmayı basitleştiren bunun gibi bazı oldukça yararlı araçlara sahip olabileceğini düşünüyorum.
Bununla birlikte, NVIDIA AI Playground kaynağında ilgilenenler bazı makine öğrenimi yeteneklerine aşina olabilirler. Mesela orada bulunan Sanatsal Stil Transferi gösteriminde istediğiniz fotoğrafı ünlü sanatçıların tarzında işleyebilirsiniz.
NVIDIA'nın diğer benzer deneyleri arasında yapay zeka tarafından oluşturulan görsel efektlerin geleneksel rasterleştirme hattıyla nasıl birleştirilebileceğini gösteren bir çalışma yer alıyor. Sonuç; oyunlarda, filmlerde ve sanal gerçeklikte kullanılabilecek hibrit bir grafik sistemidir. Bir başka benzer örnek ise, şirket uzmanları tarafından daha verimli otopilot eğitimi için geliştirilen, karla kaplı sokakları yaz sokaklarına dönüştürmeye yönelik bir algoritmadır.
Kaynak: 3dnews.ru