NVIDIA терең білім беру саласында белсенді түрде эксперимент жүргізуде және оның жұмысының нәтижелері кейде өте қызықты. Компания GDC 2019 көрмесінде қарапайым сызбалардың фотореалистік нұсқаларын жасау үшін терең оқыту үлгісін пайдаланатын GauGAN интеллектуалды сурет қолданбасын жасау туралы жариялады. Қолданбаның атауы француз пост-импрессионист суретшісі Пол Гогенге және бағдарламалық жасақтаманың картиналарға шынайы еліктейтін кескіндерді жасау үшін генеративті қарсылас желілерді (GANs) пайдалануына сілтеме жасайды.
GauGAN қалай жұмыс істейді? Компанияның түсіндірмесіне сәйкес, қолданба пайдаланушы эскизінің мәліметтерін толтыратын «ақылды щетка» сияқты (NVIDIA оны «сегментация картасы» деп атайды). Негізінде, пайдаланушы немесе суретші соңында көргісі келетін нәрсенің жоспарын белгілейді және оның қандай болуы керектігін көрсете отырып, әрбір сегментті белгілейді. Содан кейін GauGAN өз орнын алады, қосымша мәліметтерді толтырады және сызбаларды шынайырақ етеді.
Миллиондаған көркем бейнелерге үйренген терең оқыту моделі пейзажды әсерлі (бірақ әрқашан мінсіз емес) нәтижелермен толтырады. Егер сіз тоған салсаңыз, жақын маңдағы ағаштар мен тастар сияқты элементтер суда шағылысады. Сегмент белгісін «шөптен» «қарға» өзгерту жеткілікті, ал бүкіл кескін қысқыға айналады, ал жапырақты ағаштар жалаңаш болады. Не туралы айтып жатқанымызды түсіну үшін төмендегі бейнені көруге болады.
Сондай-ақ, GauGAN соңғы жұмыстарды жасау үшін көптеген басқа суреттерге негізделген кең білімді пайдаланғанымен, соңғысы әлі де түпнұсқа болып саналады, өйткені қолданба толығымен жаңа нәтижелерді жасайды.
NVIDIA жаңа смарт графикалық редакторы тек табиғи көріністермен немесе пейзаждармен шектелмейді — қолданба ғимараттарды, жолдарды және тіпті адамдарды қоса алады. GauGAN сонымен қатар пайдаланушыларға сүзгілерді қолдануға мүмкіндік береді, нәтижені олардың қалаған стиліне сәйкес сәндейді. Мұндай сүзгілер, басқалармен қатар, белгілі бір суретшінің стиліне (мысалы, Ван Гон) еліктей алады немесе күндізгі түнге кескіндерді өзгерте отырып, көріністің жарықтандыруын реттей алады.
GauGAN-ның күнделікті тұтынушыға шығарылатыны белгісіз, бірақ менің ойымша, қарапайым пайдаланушылар ерте ме, кеш пе, әртүрлі салалардағы жұмысты жеңілдететін осындай пайдалы құралдарды алуы мүмкін: архитектура мен иллюстрациядан ойын әзірлеуге дейін.
Дегенмен, NVIDIA AI Playground ресурсында қызығушылық танытқандар кейбір машиналық оқыту мүмкіндіктерімен таныса алады. Мысалы, сол жерде ұсынылған Artistic Style Transfer демонстрациясында кез келген фотосуретті атақты суретшілердің стилінде өңдеуге болады.
NVIDIA басқа ұқсас эксперименттері AI-генерацияланған көрнекі әсерлерді дәстүрлі растризация құбырымен қалай біріктіруге болатынын көрсететін зерттеуді қамтиды. Нәтижесінде ойындарда, фильмдерде және виртуалды шындықта қолдануға болатын гибридті графикалық жүйе. Тағы бір ұқсас мысал – компания мамандары автопилотты тиімдірек оқыту үшін әзірлеген қарға толы көшелерді жазғы көшелерге айналдыру алгоритмі.
Ақпарат көзі: 3dnews.ru