Jaringan saraf Nvidia mengubah sketsa sederhana menjadi lanskap yang indah

Air terjun perokok dan air terjun orang sehat

Kita semua tahu cara menggambar burung hantu. Pertama Anda perlu menggambar oval, lalu lingkaran lain, dan kemudian - ternyata burung hantu yang cantik. Tentu saja, ini adalah lelucon, dan lelucon yang sangat kuno, tetapi para insinyur Nvidia mencoba mewujudkan fantasi tersebut.

Pengembangan baru, yang disebut GauGAN, menciptakan pemandangan indah dari sketsa yang sangat sederhana (sangat sederhana - lingkaran, garis, dan semuanya). Tentu saja, pengembangan ini didasarkan pada teknologi modern - yaitu, jaringan saraf permusuhan generatif.

GauGAN memungkinkan Anda membuat dunia virtual yang penuh warna - dan tidak hanya untuk bersenang-senang, tetapi juga untuk bekerja. Jadi, arsitek, desainer lanskap, pengembang game - semuanya dapat mempelajari sesuatu yang berguna. Kecerdasan buatan segera "memahami" apa yang diinginkan seseorang dan melengkapi ide orisinal dengan detail yang sangat besar.

“Brainstorming dalam hal pengembangan desain jauh lebih mudah dengan bantuan GauGAN, karena smart brush dapat melengkapi sketsa awal dengan menambahkan gambar berkualitas,” kata salah satu pengembang GauGAN.

Pengguna alat ini dapat mengubah ide orisinal, memodifikasi lanskap atau gambar lain, menambahkan langit, pasir, laut, dll. Semua yang diinginkan hati Anda, dan penambahan hanya membutuhkan beberapa detik.

Jaringan saraf dilatih menggunakan database jutaan gambar. Berkat ini, sistem dapat memahami apa yang diinginkan seseorang dan bagaimana mencapai apa yang diinginkannya. Selain itu, jaringan saraf tidak melupakan detail terkecil. Jadi, jika Anda secara skematis menggambar sebuah kolam dan beberapa pohon di sebelahnya, maka setelah lanskap dihidupkan kembali, semua objek di sekitarnya akan terpantul di cermin air kolam.

Anda dapat memberi tahu sistem seperti apa permukaan yang terlihat - dapat ditutupi dengan rumput, salju, air, atau pasir. Semua ini bisa diubah dalam sedetik, sehingga salju menjadi pasir dan alih-alih gurun bersalju, sang seniman mendapatkan lanskap gurun.

“Ini seperti buku mewarnai yang mengatakan di mana harus meletakkan pohon, di mana matahari, dan di mana langit. Kemudian, setelah tugas awal, jaringan saraf menganimasikan gambar, menambahkan detail dan tekstur yang diperlukan, dan menggambar pantulan. Semua ini didasarkan pada gambar nyata,” kata salah satu pengembang.

Meskipun sistemnya kurang "memahami" dunia nyata, sistem ini menciptakan lanskap yang mengesankan. Ini karena dua jaringan saraf digunakan di sini, generator dan diskriminator. Generator membuat gambar dan menunjukkannya ke diskriminator. Dia, berdasarkan jutaan gambar yang dilihat sebelumnya, memilih opsi yang paling realistis.

Itu sebabnya generator "tahu" di mana refleksi seharusnya. Perlu dicatat bahwa alat ini sangat fleksibel dan dilengkapi dengan banyak pengaturan. Jadi, dengannya, Anda bisa melukis, menyesuaikan dengan gaya artis tertentu, atau sekadar bermain-main dengan penambahan cepat matahari terbit atau terbenam.

Pengembang mengklaim bahwa sistem tidak hanya mengambil gambar dari suatu tempat, menggabungkannya dan mendapatkan hasilnya. Tidak, semua "gambar" yang diterima dihasilkan. Artinya, jaringan saraf "menciptakan" seperti artis sungguhan (atau bahkan lebih baik).

Sejauh ini, program ini tidak tersedia secara bebas, tetapi akan segera dapat diuji dalam pengoperasiannya. Ini bisa dilakukan di GPU Technology Conference 2019, yang saat ini sedang berlangsung di California. Yang beruntung bisa mengunjungi pameran sudah bisa menjajal GauGAN.

Jaringan saraf telah lama diajarkan untuk mengambil bagian dalam proses kreatif. Misalnya, tahun lalu, beberapa di antaranya bisa membuat model 3D. Selain itu, pengembang dari DeepMind melatih jaringan saraf untuk memulihkan ruang dan objek tiga dimensi dari gambar, foto, dan sketsa. Untuk membuat ulang gambar sederhana, jaringan saraf membutuhkan satu gambar, untuk membuat objek yang lebih kompleks, diperlukan lima gambar untuk "pelatihan".

Adapun GauGAN, alat ini jelas akan menemukan aplikasi komersial yang layak - banyak bidang bisnis dan sains membutuhkan layanan seperti itu.

Sumber: www.habr.com