Ẹgbẹ kan ti awọn oniwadi lati Ile-ẹkọ giga Tel Aviv gbekalẹ HyperStyle, ẹya iyipada ti eto ẹkọ ẹrọ ẹrọ NVIDIA's StyleGAN2 ti o tun ṣe atunṣe lati tun awọn ẹya ti o padanu nigba ṣiṣatunṣe awọn aworan gidi. Awọn koodu ti wa ni kikọ ni Python lilo awọn PyTorch ilana ati ti wa ni pin labẹ awọn MIT iwe-ašẹ.
Ti StyleGAN ba fun ọ laaye lati ṣajọpọ awọn oju oju oju tuntun ti awọn eniyan nipa sisọ awọn aye bii ọjọ-ori, abo, gigun irun, ihuwasi ẹrin, apẹrẹ imu, awọ ara, awọn gilaasi ati igun aworan, lẹhinna HyperStyle jẹ ki o ṣee ṣe lati yi awọn aye iru kanna ni ti o wa tẹlẹ. awọn fọto laisi iyipada awọn ẹya abuda wọn lakoko mimu idanimọ ti oju atilẹba. Fun apẹẹrẹ, lilo HyperStyle, o le ṣe adaṣe iyipada ni ọjọ-ori eniyan ni fọto kan, yi irundidalara pada, ṣafikun awọn gilaasi, irungbọn tabi mustache, fun aworan ni irisi ti ohun kikọ aworan efe tabi aworan ti a fi ọwọ ṣe, ṣe ikosile oju ti ibanujẹ tabi idunnu. Pẹlupẹlu, eto naa le ṣe ikẹkọ kii ṣe lati yi awọn oju eniyan pada nikan, ṣugbọn fun awọn ohun elo eyikeyi, fun apẹẹrẹ, lati ṣatunkọ awọn aworan ti awọn ọkọ ayọkẹlẹ.
Ọna ti a dabaa jẹ ifọkansi lati yanju iṣoro ti atunṣe awọn ẹya ti o padanu ti aworan kan lakoko ṣiṣatunṣe. Ni awọn ọna ti a dabaa tẹlẹ, iṣowo-pipa laarin atunkọ ati ṣiṣatunṣe jẹ ipinnu nipasẹ ṣiṣe-tuntun ẹrọ olupilẹṣẹ aworan lati rọpo awọn apakan ti aworan ibi-afẹde nigbati o tun ṣẹda awọn agbegbe ti o padanu ni ibẹrẹ. Aila-nfani ti iru awọn isunmọ ni iwulo fun ikẹkọ ifọkansi igba pipẹ ti nẹtiwọọki nkankikan fun aworan kọọkan.
Ọna ti o da lori algorithm StyleGAN jẹ ki o ṣee ṣe lati lo awoṣe boṣewa, ti a ti kọkọ tẹlẹ lori awọn akojọpọ ti o wọpọ ti awọn aworan, lati ṣe agbejade awọn eroja ti iwa ti aworan atilẹba pẹlu ipele ti igbẹkẹle ti o ṣe afiwe si awọn algoridimu ti o nilo ikẹkọ ẹni kọọkan ti awoṣe fun ọkọọkan. aworan. Anfani miiran ti ọna tuntun ni agbara lati yipada awọn aworan pẹlu iṣẹ ṣiṣe ti o sunmọ akoko gidi.
Awọn awoṣe ikẹkọ ti a ti ṣetan ti pese sile fun awọn oju eniyan, awọn ọkọ ayọkẹlẹ ati awọn ẹranko ti o da lori awọn ikojọpọ Flickr-Faces-HQ (FFHQ, 70 ẹgbẹrun awọn aworan PNG didara ti awọn oju eniyan), Awọn ọkọ ayọkẹlẹ Stanford (16 ẹgbẹrun awọn aworan ti awọn ọkọ ayọkẹlẹ) ati AFHQ (awọn fọto ti eranko). Ni afikun, awọn irinṣẹ fun ikẹkọ awọn awoṣe rẹ ni a pese, bakanna bi awọn awoṣe ikẹkọ ti o ti ṣetan ti awọn koodu koodu boṣewa ati awọn olupilẹṣẹ ti o dara fun lilo pẹlu wọn. Fun apẹẹrẹ, awọn olupilẹṣẹ wa fun ṣiṣẹda awọn aworan ara Toonify, awọn ohun kikọ Pixar, ṣiṣẹda awọn aworan afọwọya, ati paapaa aṣa awọn ọmọ-binrin ọba lati awọn ere ere Disney.
orisun: opennet.ru