NVIDIA به طور فعال در زمینه یادگیری عمیق در حال آزمایش است و نتایج کار آن گاهی اوقات بسیار جالب است. این شرکت در GDC 2019 از ایجاد GauGAN، یک برنامه کاربردی طراحی هوشمند خبر داد که از یک مدل یادگیری عمیق برای ایجاد نسخه‌های واقعی واقعی از نقاشی‌های ساده استفاده می‌کند. نام این برنامه به هنرمند پست امپرسیونیست فرانسوی پل گوگن و استفاده نرم افزار از شبکه های متخاصم مولد (GANs) برای ایجاد تصاویری که به طور واقعی از نقاشی ها تقلید می کنند، اشاره دارد.
GauGAN چگونه کار می کند؟ طبق توضیحات این شرکت، این برنامه مانند یک «براش هوشمند» است که جزئیات طرح کاربر را پر می کند (NVIDIA آن را «نقشه تقسیم بندی» می نامد). اساساً، کاربر یا هنرمند فقط یک برنامه برای آنچه در پایان می‌خواهد ببیند تنظیم می‌کند و هر بخش را برچسب‌گذاری می‌کند و نشان می‌دهد که چه چیزی باید باشد. سپس GauGAN مسئولیت را بر عهده می گیرد و جزئیات اضافی را پر می کند و نقشه ها را واقعی تر می کند.
این مدل یادگیری عمیق که بر روی میلیون‌ها تصویر هنری آموزش دیده است، منظره را با نتایج چشمگیر (اما نه همیشه کامل) پر می‌کند. اگر یک حوض بکشید، عناصر نزدیک مانند درختان و صخره ها در آب منعکس می شوند. کافی است برچسب بخش را از "علف" به "برف" تغییر دهید و کل تصویر تغییر می کند و به زمستان تبدیل می شود و درختان برگی لخت می شوند. برای اینکه بفهمید در مورد چه چیزی صحبت می کنیم، می توانید ویدیوی زیر را تماشا کنید.
همچنین شایان ذکر است که اگرچه GauGAN از دانش گسترده‌ای بر اساس مجموعه‌ای از تصاویر دیگر برای ایجاد آثار نهایی استفاده می‌کند، اما تصاویر اخیر هنوز اصلی در نظر گرفته می‌شوند زیرا برنامه تصاویر کاملاً جدیدی را تولید می‌کند.
ویرایشگر گرافیکی هوشمند جدید NVIDIA فقط به مناظر طبیعی یا مناظر محدود نمی شود - این برنامه می تواند ساختمان ها، جاده ها و حتی افراد را اضافه کند. GauGAN همچنین به کاربران اجازه می دهد تا فیلترها را اعمال کنند و نتیجه را مطابق با سبک مورد نظر خود طراحی کنند. چنین فیلترهایی، از جمله، می توانند سبک یک هنرمند خاص (مثلاً ون گون) را تقلید کنند یا نور صحنه را تنظیم کنند و تصاویر را از روز به شب تغییر دهند.
مشخص نیست که آیا GauGAN برای استفاده روزمره مصرف‌کننده عرضه می‌شود یا خیر، اما فکر می‌کنم دیر یا زود کاربران عادی ممکن است ابزارهای بسیار مفیدی مانند این را دریافت کنند که کار را در زمینه‌های مختلف ساده می‌کند: از معماری و تصویرسازی گرفته تا توسعه بازی.
با این حال، در منبع NVIDIA AI Playground، علاقه‌مندان می‌توانند با برخی از قابلیت‌های یادگیری ماشینی آشنا شوند. به عنوان مثال، در نمایش انتقال سبک هنری موجود در آنجا، می توانید هر عکسی را به سبک هنرمندان مشهور پردازش کنید.
دیگر آزمایش‌های مشابه NVIDIA شامل مطالعه‌ای است که نشان می‌دهد چگونه جلوه‌های بصری تولید شده توسط هوش مصنوعی را می‌توان با خط لوله شطرنجی سنتی ترکیب کرد. نتیجه یک سیستم گرافیکی ترکیبی است که می تواند در بازی ها، فیلم ها و واقعیت مجازی استفاده شود. نمونه مشابه دیگر الگوریتمی برای تبدیل خیابان های پر برف به خیابان های تابستانی است که توسط متخصصان شرکت برای آموزش کارآمدتر خلبان خودکار ایجاد شده است.
منبع: 3dnews.ru