NVIDIA secara aktif bereksperimen di bidang deep learning, dan hasil karyanya terkadang cukup menarik. Perusahaan ini mengumumkan di GDC 2019 pembuatan GauGAN, sebuah aplikasi menggambar cerdas yang menggunakan model pembelajaran mendalam untuk membuat versi fotorealistik dari gambar sederhana. Nama aplikasi ini mengacu pada seniman pasca-impresionis Prancis Paul Gauguin dan penggunaan jaringan permusuhan generatif (GAN) oleh perangkat lunak untuk membuat gambar yang meniru lukisan secara realistis.
Bagaimana cara kerja GauGAN? Menurut penjelasan perusahaan, aplikasi ini seperti "sikat pintar" yang mengisi detail sketsa pengguna (NVIDIA menyebutnya sebagai "peta segmentasi"). Pada dasarnya, pengguna atau artis hanya menetapkan rencana tentang apa yang ingin mereka lihat pada akhirnya, dan memberi label pada setiap segmen, yang menunjukkan apa yang seharusnya. GauGAN kemudian mengambil alih, mengisi detail tambahan dan membuat gambar lebih realistis.
Dilatih dengan jutaan gambar artistik, model pembelajaran mendalam kemudian mengisi lanskap dengan hasil yang mengesankan (namun tidak selalu sempurna). Jika Anda menggambar kolam, elemen di dekatnya seperti pepohonan dan batu akan terpantul di air. Cukup dengan mengubah label segmen dari "rumput" menjadi "salju", dan keseluruhan gambar akan berubah, berubah menjadi musim dingin, dan pepohonan rindang akan menjadi gundul. Untuk memahami apa yang sedang kita bicarakan, Anda dapat menonton video di bawah ini.
Perlu juga dicatat bahwa meskipun GauGAN menggunakan pengetahuan luas berdasarkan sejumlah gambar lain untuk membuat karya akhir, karya terakhir tersebut masih dianggap asli karena aplikasi tersebut menghasilkan gambar yang benar-benar baru.
Editor grafis cerdas baru dari NVIDIA tidak terbatas hanya pada pemandangan alam atau lanskapβaplikasi ini dapat menambahkan bangunan, jalan, dan bahkan orang. GauGAN juga memungkinkan pengguna untuk menerapkan filter, menata hasilnya agar sesuai dengan gaya yang diinginkan. Filter tersebut, antara lain, dapat meniru gaya artis tertentu (misalnya Van Gon) atau menyesuaikan pencahayaan suatu pemandangan, mengubah gambar dari siang ke malam.
Tidak jelas apakah GauGAN akan dirilis untuk penggunaan konsumen sehari-hari, tapi menurut saya cepat atau lambat pengguna biasa mungkin akan mendapatkan beberapa alat yang cukup berguna seperti ini, menyederhanakan pekerjaan di berbagai bidang: mulai dari arsitektur dan ilustrasi hingga pengembangan game.
Namun, pada sumber daya NVIDIA AI Playground, mereka yang tertarik dapat membiasakan diri dengan beberapa kemampuan pembelajaran mesin. Misalnya, dalam demonstrasi Artistic Style Transfer yang ada di sana, Anda dapat memproses foto apa pun dengan gaya artis terkenal.
Eksperimen serupa lainnya dari NVIDIA mencakup studi yang menunjukkan bagaimana efek visual yang dihasilkan AI dapat dikombinasikan dengan jalur rasterisasi tradisional. Hasilnya adalah sistem grafis hybrid yang dapat digunakan dalam game, film, dan realitas virtual. Contoh serupa lainnya adalah algoritme untuk mengubah jalanan yang dipenuhi salju menjadi jalanan musim panas, yang dikembangkan oleh spesialis perusahaan untuk pelatihan autopilot yang lebih efisien.
Sumber: 3dnews.ru