Sieć neuronowa Nvidia zamienia proste szkice w piękne krajobrazy

Sieć neuronowa Nvidia zamienia proste szkice w piękne krajobrazy
Wodospad palacza i wodospad zdrowego człowieka

Wszyscy wiemy, jak narysować sowę. Najpierw musisz narysować owal, potem kolejny okrąg, a potem - okazuje się, że jest to wspaniała sowa. Oczywiście to żart i to bardzo stary, ale inżynierowie Nvidii starali się urzeczywistnić tę fantazję.

Nowy rozwój, który nazywa się GauGAN, tworzy wspaniałe krajobrazy z bardzo prostych szkiców (naprawdę prostych - koła, linie i wszystko inne). Oczywiście rozwój ten opiera się na nowoczesnych technologiach, a mianowicie generatywnych przeciwstawnych sieciach neuronowych.

GauGAN pozwala tworzyć kolorowe wirtualne światy – i to nie tylko do zabawy, ale również do pracy. Tak więc architekci, projektanci krajobrazu, twórcy gier - wszyscy mogą nauczyć się czegoś pożytecznego. Sztuczna inteligencja natychmiast „rozumie”, czego dana osoba chce i uzupełnia oryginalny pomysł ogromną ilością szczegółów.

„Burza mózgów w zakresie rozwoju projektu jest znacznie łatwiejsza z pomocą GauGAN, ponieważ inteligentny pędzel może uzupełnić początkowy szkic, dodając wysokiej jakości obrazy”, powiedział jeden z programistów GauGAN.

Użytkownicy tego narzędzia mogą zmienić oryginalny pomysł, zmodyfikować krajobraz lub inny obraz, dodać niebo, piasek, morze itp. Wszystko, czego dusza zapragnie, a dodanie zajmuje tylko kilka sekund.

Sieć neuronowa została przeszkolona przy użyciu bazy danych zawierającej miliony obrazów. Dzięki temu system może zrozumieć, czego dana osoba chce i jak osiągnąć to, czego chce. Ponadto sieć neuronowa nie zapomina o najdrobniejszych szczegółach. Jeśli więc schematycznie narysujesz staw i kilka drzew obok niego, to po ożywieniu krajobrazu wszystkie pobliskie obiekty będą odbijać się w lustrze wody w stawie.

Możesz powiedzieć systemowi, jaka ma być widoczna powierzchnia - może być pokryta trawą, śniegiem, wodą lub piaskiem. Wszystko to można w ciągu sekundy przekształcić tak, że śnieg staje się piaskiem, a zamiast zaśnieżonego pustkowia artysta otrzymuje pustynny pejzaż.

„To jak książeczka do kolorowania, która mówi, gdzie umieścić drzewo, gdzie jest słońce i gdzie jest niebo. Następnie, po zadaniu wstępnym, sieć neuronowa animuje obraz, dodaje niezbędne detale i tekstury, rysuje refleksy. Wszystko to oparte jest na prawdziwych obrazach” – mówi jeden z twórców.


Chociaż systemowi brakuje „zrozumienia” świata rzeczywistego, system tworzy spektakularne krajobrazy. Dzieje się tak, ponieważ zastosowano tutaj dwie sieci neuronowe, generator i dyskryminator. Generator tworzy obraz i pokazuje go dyskryminatorowi. On, na podstawie milionów wcześniej widzianych obrazów, wybiera najbardziej realistyczne opcje.

Dlatego generator „wie”, gdzie powinny znajdować się odbicia. Warto zaznaczyć, że narzędzie jest bardzo elastyczne i wyposażone w dużą liczbę ustawień. Dzięki niemu możesz malować, dostosowując się do stylu konkretnego artysty lub po prostu bawić się szybkim dodaniem wschodu lub zachodu słońca.

Twórcy twierdzą, że system nie tylko pobiera skądś obrazy, dodaje je razem i uzyskuje wynik. Nie, wszystkie otrzymane „zdjęcia” są generowane. Czyli sieć neuronowa „tworzy” jak prawdziwy artysta (a nawet lepiej).

Na razie program nie jest dostępny za darmo, ale wkrótce będzie można go przetestować w działaniu. Można to zrobić na konferencji GPU Technology Conference 2019, która właśnie trwa w Kalifornii. Szczęśliwcy, którym udało się odwiedzić wystawę, mogą już przetestować GauGAN.

Sieci neuronowe od dawna uczono brać udział w procesie twórczym. Na przykład w zeszłym roku niektóre z nich mógł tworzyć modele 3D. Ponadto programiści z DeepMind wyszkolili sieć neuronową w odtwarzaniu trójwymiarowych przestrzeni i obiektów z rysunków, fotografii i szkiców. Aby odtworzyć prostą figurę, sieć neuronowa potrzebuje jednego obrazu, aby stworzyć bardziej złożone obiekty, do „uczenia” potrzeba pięciu obrazów.

Jeśli chodzi o GauGAN, to narzędzie to z pewnością znajdzie godne zastosowanie komercyjne – wiele dziedzin biznesu i nauki ma zapotrzebowanie na tego typu usługi.

Źródło: www.habr.com

Dodaj komentarz