Alat NVIDIA menukarkan lakaran mudah kepada lukisan menggunakan AI

NVIDIA sedang bereksperimen secara aktif dalam bidang pembelajaran mendalam, dan hasil kerjanya kadangkala agak menarik. Syarikat itu mengumumkan pada GDC 2019 penciptaan GauGAN, aplikasi lukisan pintar yang menggunakan model pembelajaran mendalam untuk mencipta versi lukisan mudah fotorealistik. Nama apl itu merujuk kepada artis pasca-impresionis Perancis Paul Gauguin dan penggunaan perisian rangkaian permusuhan generatif (GAN) untuk mencipta imej yang meniru lukisan secara realistik.

Alat NVIDIA menukarkan lakaran mudah kepada lukisan menggunakan AI

Bagaimanakah GauGAN berfungsi? Menurut penjelasan syarikat, aplikasi itu seperti "berus pintar" yang mengisi butiran lakaran pengguna (NVIDIA memanggilnya sebagai "peta pembahagian"). Pada asasnya, pengguna atau artis hanya menetapkan rancangan untuk perkara yang dia mahu lihat pada akhirnya dan melabelkan setiap segmen, menunjukkan perkara yang sepatutnya. GauGAN kemudian mengambil alih, mengisi butiran tambahan dan menjadikan lukisan lebih realistik.

Dilatih pada berjuta-juta imej artistik, model pembelajaran mendalam kemudian mengisi landskap dengan hasil yang mengagumkan (tetapi tidak selalu sempurna). Jika anda melukis kolam, unsur-unsur berdekatan seperti pokok dan batu akan dipantulkan di dalam air. Ia cukup untuk menukar label segmen daripada "rumput" kepada "salji", dan keseluruhan imej akan berubah, berubah menjadi musim sejuk, dan pokok-pokok berdaun akan menjadi kosong. Untuk memahami apa yang kami bicarakan, anda boleh menonton video di bawah.

Perlu diingat bahawa walaupun GauGAN menggunakan pengetahuan yang luas berdasarkan pelbagai imej lain untuk mencipta karya akhir, yang terakhir masih dianggap asli kerana aplikasi menjana imej terhasil sepenuhnya.

Penyunting grafik pintar NVIDIA yang baharu tidak terhad kepada pemandangan semula jadi atau landskap sahajaβ€”apl itu boleh menambah bangunan, jalan raya dan juga manusia. GauGAN juga membenarkan pengguna menggunakan penapis, menggayakan hasil mengikut gaya yang mereka inginkan. Penapis sedemikian, antara lain, boleh meniru gaya artis tertentu (contohnya, Van Gon) atau melaraskan pencahayaan adegan, menukar imej dari siang ke malam.

Alat NVIDIA menukarkan lakaran mudah kepada lukisan menggunakan AI

Tidak jelas sama ada GauGAN akan dikeluarkan untuk kegunaan pengguna setiap hari, tetapi saya berpendapat bahawa lambat laun pengguna biasa mungkin mendapat beberapa alatan yang cukup berguna seperti ini, memudahkan kerja dalam pelbagai bidang: daripada seni bina dan ilustrasi kepada pembangunan permainan.

Walau bagaimanapun, pada sumber NVIDIA AI Playground, mereka yang berminat boleh membiasakan diri dengan beberapa keupayaan pembelajaran mesin. Contohnya, dalam demonstrasi Pemindahan Gaya Artistik yang terdapat di sana, anda boleh memproses sebarang foto dalam gaya artis terkenal.

Eksperimen serupa lain daripada NVIDIA termasuk kajian yang menunjukkan bagaimana kesan visual yang dijana AI boleh digabungkan dengan saluran paip rasterisasi tradisional. Hasilnya ialah sistem grafik hibrid yang boleh digunakan dalam permainan, filem dan realiti maya. Contoh lain yang serupa ialah algoritma untuk menukar jalan yang dipenuhi salji menjadi jalan musim panas, yang dibangunkan oleh pakar syarikat untuk latihan autopilot yang lebih cekap.

Alat NVIDIA menukarkan lakaran mudah kepada lukisan menggunakan AI


Sumber: 3dnews.ru

Tambah komen