La cascade du fumeur et la cascade de l'homme en bonne santé
Nous savons tous comment dessiner un hibou. Il faut d'abord dessiner un ovale, puis un autre cercle, et ensuite — cela donne un superbe hibou. Bien sûr, c'est une blague, et une très ancienne, mais les ingénieurs de Nvidia ont travaillé dur pour transformer cette idée en réalité.
, appelée GauGAN, crée de magnifiques paysages à partir de croquis très simples (vraiment simples — cercles, lignes, et tout). Bien sûr, cette invention repose sur des technologies modernes — à savoir des réseaux de neurones antagonistes génératifs.
GauGAN permet de créer des mondes virtuels colorés — et pas seulement pour le divertissement, mais aussi pour le travail. Ainsi, architectes, spécialistes en architecture de paysage, développeurs de jeux — tous peuvent en tirer quelque chose d'utile. L'intelligence artificielle comprend instinctivement ce que veut l'utilisateur et enrichit l'idée initiale d'une multitude de détails.
"Le brainstorming pour la conception de design est beaucoup plus facile avec l'aide de GauGAN, car le pinceau intelligent peut compléter le croquis initial en ajoutant des images de qualité", a déclaré l'un des développeurs de GauGAN.
Les utilisateurs de cet outil peuvent modifier l'idée initiale, ajuster le paysage ou une autre image, ajouter un ciel, des sables, de la mer, etc. Tout ce qu'ils désirent, et l'ajout se fait en quelques secondes.
Le réseau de neurones a été formé en utilisant une base de millions d'images. Grâce à cela, le système peut comprendre ce que désire l'utilisateur et comment y parvenir. De plus, le réseau de neurones n'oublie pas les moindres détails. Par exemple, si un étang et quelques arbres sont esquissés à proximité, alors, après l'animation du paysage, tous les objets environnants seront reflétés dans le miroir de l'étang.
Le système peut indiquer quelle devrait être la surface visible — elle peut être couverte de gazon, de neige, d'eau ou de sable. Tout cela peut être transformé en une seconde, de sorte que la neige devienne du sable et qu'au lieu d'une lande enneigée, l'artiste obtienne un paysage désertique.
«C'est comme un livre de coloriage, où il est indiqué où placer les arbres, où mettre le soleil et où mettre le ciel. Ensuite, après la tâche initiale, le réseau neuronal donne vie à l'image, ajoute les détails et les textures nécessaires, et dessine les reflets. Tout cela est basé sur des images réelles», dit l'un des développeurs.
Bien que le système manque de «compréhension» du monde réel, il génère des paysages impressionnants. Tout cela grâce à l'utilisation de deux réseaux de neurones, un générateur et un discriminateur. Le générateur crée l'image et la montre au discriminateur. Celui-ci, en se basant sur des millions d'images vues auparavant, sélectionne les options les plus réalistes.
C'est pourquoi le générateur «sait» où doivent être les reflets. Il est à noter que l'outil est très flexible et équipé d'un grand nombre de réglages. Ainsi, il est possible de créer des tableaux en s'adaptant au style d'un artiste particulier ou simplement de jouer avec l'ajout rapide d'un lever ou d'un coucher de soleil.
Les développeurs affirment que le système ne se contente pas de prendre des images ici et là, de les assembler pour obtenir un résultat. Non, toutes les «images» obtenues sont générées. Cela signifie que le réseau neuronal «crée» comme un véritable artiste (ou même mieux).
Pour l'instant, le programme n'est pas disponible publiquement, mais il sera bientôt possible de le tester en action. Cela peut se faire lors de la conférence technologique GPU Technology Conference 2019, qui se déroule actuellement en Californie. Les chanceux qui ont pu assister à la conférence peuvent déjà tester GauGAN.
Les réseaux de neurones participent déjà depuis longtemps au processus créatif. Par exemple, l'année dernière, certains d'entre eux . De plus, les développeurs de DeepMind ont formé un réseau de neurones à restaurer des espaces et des objets tridimensionnels à partir de dessins, de photos et de croquis. Pour recréer une forme simple, un réseau de neurones n'a besoin que d'une image, tandis que pour créer des objets plus complexes, il faut cinq images pour l'entraînement.
En ce qui concerne GauGAN, cet outil trouvera clairement une application commerciale digne de ce nom — de nombreux secteurs d'activité et de recherche ont besoin de services similaires.
Source : habr.com
