Mit-3 ta' Lulju sas-16 ta' Lulju fl-Università Statali ta' Nizhny Novgorod. N.I. Lobachevsky ospita l-Iskola tas-Sajf Interuniversitarja Intel dwar il-Viżjoni tal-Kompjuter - Kamp tas-Sajf tal-Viżjoni tal-Kompjuter, li fiha ħadu sehem aktar minn 100 student. L-iskola kienet immirata għal studenti tekniċi minn universitajiet ta 'Nizhny Novgorod li huma interessati fil-viżjoni tal-kompjuter, tagħlim profond, netwerks newrali, Intel OpenVINO, OpenCV.
F’dan l-artiklu se naqsmu kif saret l-għażla għall-Iskola, x’studjaw, x’għamlu l-istudenti fil-parti prattika, u nitkellmu wkoll dwar xi proġetti ppreżentati fid-difiża.
Proċess ta' għażla u forom ta' parteċipazzjoni
Iddeċidejna li nagħtu lit-tfal l-għażla li japplikaw għal żewġ forom ta’ edukazzjoni: full-time u part-time. Għal korsijiet part-time u part-time, l-istudenti ma għamlux għażla u ġew irreġistrati immedjatament. Huma attendew biss lectures, matul il-ġimgħa, filgħodu. It-tfal kellhom ukoll l-opportunità li jlestu ħidmiet prattiċi u jibagħtuhom għall-ittestjar mill-għalliema.
Biex jikkwalifikaw għall-eżami full-time, il-guys kellhom jiġu fl-uffiċċju Intel għal intervista mal-kummissjoni. Id-differenza mill-forma part-time u part-time kienet li, minbarra l-lekċers, il-parteċipanti tal-kamp għaddew minn ħidmiet prattiċi ma 'kuraturi - għalliema u inġiniera UNN minn Intel. Fit-tieni ġimgħa, l-inkarigi prattiċi spiċċaw u bdew proġetti, li fuqhom il-parteċipanti ħadmu fi gruppi ta’ 3 persuni.
Waqt l-intervista, l-istudenti ġew mistoqsija mistoqsijiet dwar il-matematika u l-ipprogrammar, u ngħataw ukoll problema li kellha tiġi solvuta fuq il-post. Ta 'min jinnota li l-kummissjoni kienet tikkonsisti minn inġiniera tas-softwer, inġiniera tal-algoritmi, u għalliema universitarji. N.I. Lobachevsky, għalhekk l-intervista rriżulta li kienet multidimensjonali u straordinarja. Mill-perspettiva tal-intervistatur, kien interessanti li ssir taf l-għarfien tekniku bażiku tal-istudenti fir-rigward tal-viżjoni tal-kompjuter, għalhekk suġġetti bħal C++/STL, OOP, algoritmi bażiċi u strutturi tad-dejta, alġebra lineari, analiżi matematika, matematika diskreta u intalbu ħafna aktar. Fost il-ħidmiet, il-prijorità kienet li jsir jaf ir-raġunament tal-istudenti. Il-kummissjoni kienet interessata wkoll fejn studjaw, x’esperjenza kellhom qabel din l-iskola (pereżempju, attività xjentifika) u kif tista’ tiġi applikata direttament fil-qasam tal-viżjoni bil-kompjuter.
B’kollox fl-għażla full-time ħadu sehem 78 student, filwaqt li kien hemm 24 post full-time.Il-kompetizzjoni kienet ta’ 3 studenti għal kull post. Statistika dwar il-parteċipanti u d-differenzi viżwali bejn forom ta’ parteċipazzjoni full-time u part-time jistgħu jidhru fit-tabella hawn taħt:
X'għamlu l-ġuvni għal ġimgħatejn?
L-istudenti saru familjari fit-teorija u l-prattika mal-kompiti ewlenin tal-viżjoni bil-kompjuter: il-klassifikazzjoni tal-immaġni, l-iskoperta tal-oġġetti u t-traċċar tagħhom. Il-komponent tal-lecture għal kull suġġett ġeneralment kien jinkludi eskursjoni storika fl-iżvilupp ta 'metodi klassiċi għas-soluzzjoni ta' problemi ta 'viżjoni bil-kompjuter u metodi moderni ta' soluzzjoni bl-użu ta 'tagħlim tal-magni u netwerks newrali. It-teorija kienet segwita mill-prattika, fejn l-istudenti niżżlu mudelli tan-netwerk newrali popolari u nedewhom bl-użu tal-modulu DNN tal-librerija OpenCV, u ħolqu applikazzjoni apposta.
Il-preżentazzjonijiet tal-lectures kollha ġew imqiegħda f'repożitorju pubbliku , sabiex l-istudenti jkunu jistgħu dejjem jiftħu u jaraw l-informazzjoni meħtieġa, inkluż wara l-iskola. Kien possibbli li tikkomunika ma' letturi, għalliema tal-prattika u inġiniera Intel kemm live kif ukoll permezz ta' chat fuq Gitter. Iż-żmien tal-ġimgħa tal-proġett irriżulta wkoll li kien ta 'suċċess: beda nhar l-Erbgħa, li għamilha possibbli li tqatta' tmiem il-ġimgħa b'mod utli ħieles minn lekċers, ittejjeb id-deċiżjonijiet tat-tim. L-aktar parteċipanti responsabbli qattgħu nofs is-Sibt fl-uffiċċju tal-Intel, li għalih ġew ippremjati b’eskursjoni mhux skedata fl-istess jum.
Kif kienet id-difiża tal-proġetti?
Kull tim ingħata 10 minuti biex jitkellem dwar dak li għamel waqt il-proġett u għal xiex waslu. Wara dan iż-żmien, bdew 5 minuti, li matulhom l-inġiniera tal-kumpanija staqsew mistoqsijiet lill-guys u taw ftit pariri li jgħinuhom itejbu l-proġett tagħhom jew jipprevjenu żbalji eżistenti fil-futur. Kull wieħed mill-guys ippruvaw ruħhom bħala kelliem, urew l-għarfien tagħhom fil-qasam tal-viżjoni tal-kompjuter u kkonfermaw il-kontribut tagħhom għall-ħolqien tal-proġett, li għenuna nikkunsidraw u niġbdu konklużjoni dwar kull parteċipant fl-iskola. Id-difiża seħħet fuq 3 sigħat, iżda ħadna ħsieb il-ġuvini u naqqas it-tensjoni b'waqfa qasira għall-kafè, fejn il-ġuvini setgħu jieħdu nifs u jiddiskutu kwistjonijiet ma 'speċjalisti ewlenin ta' Intel.
Fl-aħħar tal-ġurnata, tajna l-ewwel post, it-tieni u t-tielet post. Kien pjuttost diffiċli li tagħżel, għaliex kull tim, kull proġett kellu t-togħma tiegħu u kien distint mill-oriġinalità tal-preżentazzjoni tiegħu.
Parteċipanti full-time CV Camp, difiża tal-proġett, uffiċċju Intel f'Nizhny Novgorod
Proġetti ppreżentati
Ingwanta intelliġenti
L-użu ta' detector u tracker bl-użu ta' OpenCV għal navigazzjoni viżwali fl-ispazju. It-tim żied ukoll il-kapaċità ta 'sensing tal-fond bl-użu ta' żewġ kameras. Il-Microsoft Speech API huwa użat bħala l-interface ta 'ġestjoni.
Riċettur
Sejbien ta 'ikel u għażla ta' riċetta għal dixx lest, inklużi l-ingredjenti misjuba. Il-ġuvini ma beżgħux mill-kompitu u fi żmien ġimgħa mmarkaw numru suffiċjenti ta 'immaġini waħedhom, ħarrġu lid-ditekter bl-użu tal-API TensorFlow Object Detection u żiedu l-loġika biex isibu r-riċetta. Sempliċi u b'togħma!
Editur 2.0
Il-parteċipanti tal-proġett użaw sett ta’ netwerks newrali (tfittxija tal-wiċċ, normalizzazzjoni tal-immaġni tal-wiċċ b’punti ewlenin, kalkolu tad-deskrittur tal-immaġni tal-wiċċ) għar-rikonoxximent tal-wiċċ bħala parti mill-kompitu tat-tiftix għal frammenti f’vidjows twal li fihom ċerta persuna tkun rigal. Is-sistema żviluppata tista 'tintuża bħala sistema ta' assistenza għall-editjar tal-vidjo, li teħles lil persuna milli jkollha tara l-video hi stess fit-tfittxija tal-frammenti meħtieġa. Jużaw netwerks newrali minn , It-tim irnexxielu jikseb veloċità għolja tal-applikazzjoni: fuq laptop b'proċessur Intel Core i5, il-veloċità tal-ipproċessar tal-vidjo kienet 58 frejm kull sekonda.
Anonimizzatur
Tpinġija nuċċalijiet u maskri fuq wiċċ persuna. In-netwerk MTCNN intuża biex jinstabu uċuħ u punti ewlenin.
Anonimu
Xogħol ieħor interessanti dwar is-suġġett tal-ħabi tal-identità. Dan it-tim introduċa diversi għażliet għad-distorsjoni tal-uċuħ: ċajpir u pixelation. F'ġimgħa waħda, il-guys mhux biss dehret il-kompitu, iżda pprovdew ukoll mod għall-anonimizzazzjoni ta 'persuna speċifika (b'rikonoxximent tal-wiċċ).
Saħħan
It-tim tal-proġett "Warm-up" solva l-problema tal-ħolqien ta 'assistent sportiv għall-eżerċizzju ta' l-inklinazzjoni tar-ras. U anki jekk l-applikazzjoni finali ta 'din l-applikazzjoni għadha kontroversjali, sar studju komprensiv li jqabbel diversi algoritmi ta' skoperta tal-wiċċ: kaskati Haar, netwerks minn TensorFlow, OpenCV u OpenVINO. Saħna mhux biss fiżikament, iżda wkoll mentalment!
Lower 800
Nizhny Novgorod, il-belt fejn saret l-iskola, se tagħlaq 2 sena fi żmien sentejn, li jfisser li hemm biżżejjed żmien biex jiġi implimentat proġett interessanti. Tlabna lit-tfal biex jaħsbu dwar il-kompitu li joħolqu gwida li, ibbażata fuq l-immaġni tal-faċċata tal-bini, tista 'tipprovdi informazzjoni dwar x'tip ta' oġġett jidher fl-immaġini u liema fatti huma magħrufa dwarha. Fl-opinjoni tagħna, dan il-kompitu kien wieħed mill-aktar diffiċli, peress li huwa relatat mal-viżjoni klassika tal-kompjuter, iżda t-tim wera riżultat deċenti.
Imqass tal-karta tal-blat
Minkejja r-restrizzjonijiet ta 'żmien stretti għat-tlestija tax-xogħol tad-disinn, dan it-tim lanqas ma beża' jagħmel esperiment biex iħarreġ in-netwerk newrali tagħhom stess biex jikklassifikaw il-pożizzjonijiet tal-idejn f'logħba magħrufa.
Feedback mill-parteċipanti
Tlabna lill-istudenti minn korsijiet differenti biex jaqsmu l-impressjonijiet tagħhom dwar l-Iskola Sajf:
Dan l-aħħar kelli x-xorti li nattendi l-Intel Computer Vision Summer Camp u kienet esperjenza sabiħa. Ksibna ħafna għarfien u ħiliet ġodda fil-qasam tas-CV, l-installazzjoni tas-software, id-debugging, konna wkoll mgħaddsa f’ambjent tax-xogħol, iffaċċjajna problemi reali, iddiskutejna soluzzjonijiet possibbli ma’ kollegi u għalliema tal-iskola.Hemm ħrafa li l-impjieg ta’ programmatur tikkonsisti biss f’komunikazzjoni ma’ kompjuter. Madankollu, dan mhu l-każ xejn. Ix-xogħol kreattiv tagħna huwa inseparabbli mill-komunikazzjoni man-nies. Kien permezz tal-komunikazzjoni li wieħed seta’ jikseb għarfien uniku. U dan il-komponent tal-iskola għoġobni l-aktar. Madankollu, hemm żvantaġġ wieħed... wara li spiċċajt it-taħriġ xtaqt inkompli! Minbarra l-għarfien teoretiku fid-DL u l-ħiliet prattiċi fis-CV, ksibt idea ta’ liema oqsma tal-matematika għandhom jingħataw attenzjoni speċjali u liema teknoloġiji għandhom jiġu studjati. Id-dedikazzjoni, il-professjonaliżmu u l-imħabba għall-ħidma tagħhom tal-inġiniera u r-riċerkaturi Intel influwenzaw l-għażla tiegħi tad-direzzjoni fl-IT. Huwa ta’ dan li nixtieq nirringrazzja lill-organizzaturi kollha tal-iskola.
Kristina, l-1 sena, HSE
Fi żmien daqshekk qasir, l-iskola setgħet tipprovdi informazzjoni u prattika massima fuq is-suġġett tal-viżjoni bil-kompjuter. U għalkemm kienet iddisinjata għall-għarfien bażiku, il-lectures kien fihom ħafna materjal tekniku li trid tifhem u tqatta’ aktar ħin tistudja. Il-parrini u l-letturi tal-iskola wieġbu bil-ħerqa l-mistoqsijiet kollha u kkomunikaw mal-istudenti. Ukoll, waqt li tlesti l-proġett finali, kelli nidħol fil-ġungla tal-iżvilupp ta 'applikazzjoni lesta u niltaqa' ma 'diffikultajiet li mhux dejjem jinqalgħu meta nistudja. It-tim tagħna eventwalment għamel applikazzjoni biex tilgħab il-logħba "blat-karta-imqass" bil-kompjuter. Ħarrġajna mudell biex nirrikonoxxu figura fuq webcam, ktibna loġika u għamilna interface ibbażat fuq il-qafas opencv. L-iskola pprovdiet ikel għall-ħsieb u vettur għat-tagħlim u l-iżvilupp sussegwenti. Jien kuntent ħafna li ħadt sehem.
Sergey, it-3 sena, UNN
L-iskola ma tantx laħqet l-aspettattivi tiegħi. Il-lekċers ingħataw minn nies b'esperjenza pjuttost minn żviluppaturi Intel. Il-komunikazzjoni mal-letturi dejjem kienet interessanti u utli, il-konsulenti huma reattivi u dejjem lesti biex jgħinu.Il-lectures huma pjaċevoli biex tisma, is-suġġetti huma pjuttost rilevanti u informattivi. Imma diġà kont naf xi affarijiet, u dawk li ma kontx naf ma kienu appoġġjati mill-prattika bl-ebda mod, u għalhekk il-materjal verament tajjeb qatt ma kien mifhum u studjat għal kollox minni. Iva, il-biċċa l-kbira tal-informazzjoni hija pprovduta għal skopijiet informattivi, sabiex imbagħad tkun tista' tipprovaha d-dar, jew sempliċement ikollok idea ta' x'inhu kollox, imma xorta ridt nimplimenta xi algoritmi eżistenti waħdi taħt il- superviżjoni ta’ għalliema b’esperjenza li jistgħu jagħtu pariri tajbin jew għajnuna jekk jiġri xi ħaġa ma taħdimx. Bħala riżultat, fil-prattika, intużaw soluzzjonijiet lesti, u l-kodiċi, wieħed jista 'jgħid, kien miktub minn qabel għalina; kien jeħtieġ biss li jiġi mmodifikat ftit. Il-proġetti kienu l-aktar sempliċi, u jekk tipprova tikkomplika l-kompitu b'xi mod, allura m'għandekx ħin biżżejjed biex timplimentah fi stat bejn wieħed u ieħor stabbli, kif ġara magħna.
B'mod ġenerali, l-iskola kollha tidher qisha xi tip ta 'logħba mhux serja ħafna ta' l-iżviluppaturi, u dan huwa preċiżament it-tort tal-parti prattika. Naħseb li huwa meħtieġ li jiżdied il-ħin mqatta 'l-iskola, li tikkomplika l-materjal tal-prattika sabiex tkun tista' u għandek tikteb xi ħaġa lilek innifsek, xi ħaġa tassew kumplessa u meħtieġa, u ma tużax dawk lesti, biex tagħmel il-prattika aktar faċli fiż-żieda. kumplessità, suġġetti għal proġetti ta 'kompetizzjonijiet għandhom jingħataw fl-ewwel jiem, sabiex il-materjal minn lekċers u prattiċi jkunu jistgħu jintużaw immedjatament fil-proġetti tiegħek u jkun hemm aktar ħin għall-implimentazzjoni. Imbagħad il-ħin mgħoddi l-iskola se jservi bħala esperjenza tajba għal speċjalisti li qed jaspiraw.
Dmitry, grad tal-masters tal-1 sena, NSTU
L-iskola tas-sajf minn Intel kienet ċans kbir li tqatta’ dan is-sajf tagħmel dak li tħobb. Il-fatt stess li l-lectures kienu mogħtija minn impjegati tal-Intel relatati mal-ipprogrammar fil-qasam tal-viżjoni tal-kompjuter ma ħallinix nirrilassa; ridt nieħdu l-aħjar mill-proċess kollu, għalkemm ġieli kien diffiċli. Kull jum għadda malajr ħafna, imperċettibbli u bil-frott. L-opportunità li nimplimenta l-proġett tiegħi stess ippermettili li naħdem f’tim ma’ kuraturi mill-isbaħ u parteċipanti oħra tal-iskola. Dawn il-ġimagħtejn jistgħu jiġu deskritti fil-qosor kif ġej: interessanti u li jgħaddu.
Elizaveta, it-2 sena, UNN
Fil-ħarifa (Ottubru-Novembru), il-programm edukattiv Delta jistenniek, informazzjoni li dwarha tista’ ssir taf minn tagħna . Ibqa' sintonizzat!
Sors: www.habr.com