Le réseau de neurones Nvidia transforme de simples croquis en magnifiques paysages

Le réseau de neurones Nvidia transforme de simples croquis en magnifiques paysages
La cascade du fumeur et la cascade d'une personne en bonne santé

Nous savons tous comment dessiner un hibou. Vous devez d'abord dessiner un ovale, puis un autre cercle, puis - vous obtenez un magnifique hibou. Bien sûr, c'est une blague, et très ancienne, mais les ingénieurs de Nvidia ont essayé de réaliser le fantasme.

Nouveau développement, qui s'appelle GauGAN, crée de magnifiques paysages à partir de croquis très simples (vraiment simples - cercles, lignes et tout). Bien sûr, ce développement est basé sur des technologies modernes, à savoir les réseaux neuronaux antagonistes génératifs.

GauGAN vous permet de créer des mondes virtuels colorés - et pas seulement pour le plaisir, mais aussi pour le travail. Ainsi, les architectes, les paysagistes, les développeurs de jeux - ils peuvent tous apprendre quelque chose d'utile. L'intelligence artificielle "comprend" immédiatement ce qu'une personne veut et complète l'idée originale avec une énorme quantité de détails.

"Le brainstorming en termes de développement de conception est beaucoup plus facile avec l'aide de GauGAN, car un pinceau intelligent peut compléter l'esquisse initiale en ajoutant des images de qualité", a déclaré un développeur de GauGAN.

Les utilisateurs de cet outil peuvent changer l'idée originale, modifier le paysage ou une autre image, ajouter du ciel, du sable, de la mer, etc. Tout ce que votre cœur désire, et l'ajout ne prend que quelques secondes.

Le réseau de neurones a été entraîné à l'aide d'une base de données de millions d'images. Grâce à cela, le système peut comprendre ce qu'une personne veut et comment réaliser ce qu'elle veut. De plus, le réseau de neurones n'oublie pas les moindres détails. Ainsi, si vous dessinez schématiquement un étang et quelques arbres à côté, une fois le paysage ravivé, tous les objets à proximité seront reflétés dans le miroir de l'eau de l'étang.

Vous pouvez dire au système quelle doit être la surface visible - elle peut être recouverte d'herbe, de neige, d'eau ou de sable. Tout cela peut être transformé en une seconde, de sorte que la neige devient du sable et au lieu d'un terrain vague enneigé, l'artiste obtient un paysage désertique.

« C'est comme un livre de coloriage qui dit où placer l'arbre, où est le soleil et où est le ciel. Puis, après la tâche initiale, le réseau de neurones anime l'image, ajoute les détails et textures nécessaires, dessine des reflets. Tout cela est basé sur des images réelles », explique l'un des développeurs.


Bien que le système manque de "compréhension" du monde réel, le système crée des paysages spectaculaires. En effet, deux réseaux de neurones sont utilisés ici, un générateur et un discriminateur. Le générateur crée une image et la montre au discriminateur. Il, basé sur des millions d'images déjà vues, choisit les options les plus réalistes.

C'est pourquoi le générateur "sait" où doivent se trouver les réflexions. Il est à noter que l'outil est très flexible et doté d'un grand nombre de réglages. Ainsi, avec lui, vous pouvez peindre, vous adapter au style d'un artiste particulier, ou simplement jouer avec l'ajout rapide du lever ou du coucher du soleil.

Les développeurs affirment que le système ne se contente pas de prendre des images quelque part, de les additionner et d'obtenir le résultat. Non, toutes les "images" reçues sont générées. C'est-à-dire que le réseau de neurones "crée" comme un véritable artiste (ou même mieux).

Jusqu'à présent, le programme n'est pas disponible gratuitement, mais il sera bientôt possible de le tester au travail. Cela peut être fait lors de la GPU Technology Conference 2019, qui se déroule actuellement en Californie. Les chanceux qui ont pu visiter l'exposition peuvent déjà tester GauGAN.

Les réseaux de neurones ont depuis longtemps appris à participer au processus de création. Par exemple, l'année dernière, certains d'entre eux pourrait créer des modèles 3D. De plus, les développeurs de DeepMind ont formé le réseau de neurones pour restaurer des espaces et des objets tridimensionnels à partir de dessins, de photographies et de croquis. Afin de recréer une figure simple, une image suffit pour le réseau de neurones, pour créer des objets plus complexes, cinq images sont nécessaires pour la "formation".

Quant à GauGAN, cet outil trouvera clairement une application commerciale valable - de nombreux domaines commerciaux et scientifiques ont besoin de tels services.

Source: habr.com

Ajouter un commentaire