Nvidia 的神經網絡將簡單的草圖變成美麗的風景

Nvidia 的神經網絡將簡單的草圖變成美麗的風景
吸煙者的瀑布和健康人的瀑布

我們都知道如何畫貓頭鷹。 首先你需要畫一個橢圓,然後是另一個圓,然後 - 你會得到一隻漂亮的貓頭鷹。 當然,這是一個笑話,而且是一個非常古老的笑話,但 Nvidia 的工程師們試圖讓這個幻想成真。

新發展,被稱為 GauGAN,從非常簡單的草圖(非常簡單 - 圓圈、線條和所有)創建華麗的風景。 當然,這種發展是基於現代技術——即生成對抗神經網絡。

GauGAN 允許您創建豐富多彩的虛擬世界 - 不僅是為了娛樂,也是為了工作。 因此,建築師、景觀設計師、遊戲開發人員——他們都可以學到有用的東西。 人工智能立即“理解”一個人想要什麼,並用大量細節補充原始想法。

“在 GauGAN 的幫助下,設計開發方面的頭腦風暴變得更加容易,因為智能畫筆可以通過添加高質量圖像來補充初始草圖,”一位 GauGAN 開發人員說。

該工具的用戶可以改變原有的想法,修改風景或其他圖像,添加天空、沙灘、大海等。 您心中所想的一切,添加只需幾秒鐘。

使用數百萬圖像的數據庫訓練神經網絡。 由於這一點,系統可以理解一個人想要什麼以及如何實現他們想要的。 此外,神經網絡不會忘記最小的細節。 所以,如果你示意性地畫一個池塘和旁邊的一些樹,那麼在景觀恢復之後,附近的所有物體都會反映在池塘水的鏡子裡。

您可以告訴系統可見表面應該是什麼——它可以被草、雪、水或沙子覆蓋。 這一切都可以瞬間轉化,讓雪變成沙子,藝術家得到的不是白雪皚皚的荒地,而是沙漠景觀。

“這就像一本填色書,上面寫著樹該放在哪裡,太陽在哪裡,天空在哪裡。 然後,在完成初始任務後,神經網絡會為圖片製作動畫,添加必要的細節和紋理,繪製倒影。 所有這一切都基於真實圖像,”其中一位開發人員說。


儘管該系統缺乏對現實世界的“理解”,但該系統創造了壯觀的景觀。 這是因為這裡使用了兩個神經網絡,一個生成器和一個鑑別器。 生成器創建圖像並將其顯示給鑑別器。 他根據之前看到的數百萬張圖片,選擇最真實的選項。

這就是為什么生成器“知道”反射應該在哪裡的原因。 值得注意的是,該工具非常靈活,配備了大量設置。 因此,有了它,您可以根據特定藝術家的風格進行繪畫,或者只是玩弄快速添加日出或日落的效果。

開發人員聲稱該系統不只是從某個地方獲取圖像,將它們相加並得到結果。 不,所有收到的“圖片”都是生成的。 也就是說,神經網絡像真正的藝術家一樣(甚至更好)“創造”。

到目前為止,該程序還不是免費提供的,但很快就可以在工作中對其進行測試。 這可以在目前正在加利福尼亞舉行的 GPU 技術大會 2019 上完成。 能夠參觀展覽的幸運者已經可以測試 GauGAN。

神經網絡長期以來一直被教導參與創作過程。 例如,去年,其中一些 可以創建 3D 模型. 此外,DeepMind 的開發人員訓練神經網絡從繪圖、照片和草圖中恢復三維空間和物體。 為了重新創建一個簡單的圖形,神經網絡需要一張圖片;要創建更複雜的對象,則需要五張圖片進行“訓練”。

至於 GauGAN,這個工具顯然會找到有價值的商業應用——許多商業和科學領域都需要此類服務。

來源: www.habr.com

添加評論