Rikonoxximent ta’ tankijiet fi stream video bl-użu ta’ metodi ta’ tagħlim bil-magni (+2 vidjows fuq il-pjattaformi Elbrus u Baikal)

Rikonoxximent ta’ tankijiet fi stream video bl-użu ta’ metodi ta’ tagħlim bil-magni (+2 vidjows fuq il-pjattaformi Elbrus u Baikal)

Matul l-attivitajiet tagħna, aħna kuljum niffaċċjaw il-problema li niddeterminaw il-prijoritajiet tal-iżvilupp. Meta wieħed iqis id-dinamika għolja tal-iżvilupp tal-industrija tal-IT, id-domanda dejjem tiżdied min-negozju u l-gvern għal teknoloġiji ġodda, kull darba li niddeterminaw il-vettur tal-iżvilupp u ninvestu l-forzi u l-fondi tagħna stess fil-potenzjal xjentifiku tal-kumpanija tagħna, aħna niżguraw li ir-riċerka u l-proġetti kollha tagħna huma ta’ natura fundamentali u interdixxiplinari.

Għalhekk, billi niżviluppaw it-teknoloġija ewlenija tagħna - il-qafas ta 'rikonoxximent tad-dejta HIEROGLYPH, aħna mħassba kemm dwar it-titjib tal-kwalità tar-rikonoxximent tad-dokumenti (il-linja tan-negozju ewlenija tagħna) kif ukoll il-possibbiltà li nużaw it-teknoloġija biex issolvi problemi ta' rikonoxximent relatati. Fl-artiklu tal-lum se ngħidulek kif, abbażi tal-magna ta 'rikonoxximent tagħna (dokumenti), għamilna rikonoxximent ta' oġġetti akbar u strateġikament importanti fi fluss tal-vidjo.

Dikjarazzjoni tal-problema

Bl-użu ta 'żviluppi eżistenti, tibni sistema ta' rikonoxximent tat-tank li tagħmilha possibbli li tikklassifika oġġett, kif ukoll tiddetermina indikaturi ġeometriċi bażiċi (orjentazzjoni u distanza) f'kundizzjonijiet ikkontrollati ħażin mingħajr l-użu ta 'tagħmir speċjalizzat.

deċiżjoni

Aħna għażilna l-approċċ tat-tagħlim tal-magni statistiku bħala l-algoritmu ewlieni biex issolvi l-problema. Iżda waħda mill-problemi ewlenin tat-tagħlim tal-magni hija l-ħtieġa li jkun hemm ammont suffiċjenti ta 'dejta ta' taħriġ. Ovvjament, immaġini naturali miksuba minn xeni reali li fihom l-oġġetti li għandna bżonn mhumiex disponibbli għalina. Għalhekk, ġie deċiż li tirrikorri għall-ġenerazzjoni tad-dejta meħtieġa għat-taħriġ, fortunatament Għandna ħafna esperjenza f'dan il-post. U madankollu, deher mhux naturali għalina li nisintetizzaw kompletament id-dejta għal dan il-kompitu, għalhekk tqassim speċjali ġie ppreparat biex jissimula xeni reali. Il-mudell fih diversi oġġetti li jissimulaw il-kampanja: kisi karatteristiku tal-pajsaġġ, arbuxxelli, siġar, ċnut, eċċ. L-immaġini nqabdu permezz ta’ kamera diġitali ta’ format żgħir. Matul il-proċess tal-qbid tal-immaġni, l-isfond tax-xena nbidel b'mod sinifikanti biex l-algoritmi jsiru aktar robusti għall-bidliet fl-isfond.

Rikonoxximent ta’ tankijiet fi stream video bl-użu ta’ metodi ta’ tagħlim bil-magni (+2 vidjows fuq il-pjattaformi Elbrus u Baikal)

L-oġġetti fil-mira kienu mudelli 4 ta 'tankijiet tal-battalja: T-90 (Russja), M1A2 Abrams (USA), T-14 (Russja), Merkava III (Iżrael). L-oġġetti kienu jinsabu f'pożizzjonijiet differenti tal-poligonu, u b'hekk espandew il-lista ta 'angoli viżibbli aċċettabbli tal-oġġett. Ostakli tal-inġinerija, siġar, arbuxxelli u elementi oħra tal-pajsaġġ kellhom rwol sinifikanti.

Rikonoxximent ta’ tankijiet fi stream video bl-użu ta’ metodi ta’ tagħlim bil-magni (+2 vidjows fuq il-pjattaformi Elbrus u Baikal)

Għalhekk, fi ftit jiem aħna miġbura sett suffiċjenti għat-taħriġ u l-evalwazzjoni sussegwenti tal-kwalità tal-algoritmu (diversi għexieren ta 'eluf ta' immaġini).

Huma ddeċidew li jaqsmu r-rikonoxximent innifsu f'żewġ partijiet: lokalizzazzjoni tal-oġġett u klassifikazzjoni tal-oġġett. Il-lokalizzazzjoni twettqet bl-użu ta 'klassifikatur ta' Viola u Jones imħarreġ (wara kollox, tank huwa oġġett riġidu normali, mhux agħar minn wiċċ, għalhekk il-metodu "dettall-blind" ta 'Viola u Jones malajr jillokalizza l-oġġett fil-mira). Imma afdajna l-klassifikazzjoni u d-determinazzjoni tal-angolu lil netwerk newrali konvoluzzjonali - f'dan il-kompitu huwa importanti għalina li d-ditekter jidentifika b'suċċess dawk il-karatteristiċi li, ngħidu aħna, jiddistingwu t-T-90 mill-Merkava. Bħala riżultat, kien possibbli li tinbena kompożizzjoni effettiva ta 'algoritmi li ssolvi b'suċċess il-problema tal-lokalizzazzjoni u l-klassifikazzjoni ta' oġġetti tal-istess tip.

Rikonoxximent ta’ tankijiet fi stream video bl-użu ta’ metodi ta’ tagħlim bil-magni (+2 vidjows fuq il-pjattaformi Elbrus u Baikal)

Sussegwentement, nedejna l-programm li jirriżulta fuq il-pjattaformi eżistenti tagħna kollha (Intel, ARM, Elbrus, Baikal, KOMDIV), algoritmi ottimizzati komputament diffiċli biex iżidu l-prestazzjoni (diġà ktibna dwar dan bosta drabi fl-artikoli tagħna, pereżempju hawn https://habr.com/ru/company/smartengines/blog/438948/ jew https://habr.com/ru/company/smartengines/blog/351134/) u kiseb tħaddim stabbli tal-programm fuq l-apparat f'ħin reali.


Bħala riżultat tal-azzjonijiet kollha deskritti, ksibna prodott ta 'softwer sħiħ b'karatteristiċi tattiċi u tekniċi sinifikanti.

Smart Tank Reader

Għalhekk, aħna nippreżentawlek l-iżvilupp il-ġdid tagħna - programm għar-rikonoxximent ta 'immaġini ta' tankijiet fi stream video Smart Tank Reader, li:

Rikonoxximent ta’ tankijiet fi stream video bl-użu ta’ metodi ta’ tagħlim bil-magni (+2 vidjows fuq il-pjattaformi Elbrus u Baikal)

  • Issolvi l-problema ta’ “ħabib jew għadu” għal sett partikolari ta’ oġġetti f’ħin reali;
  • Jiddetermina parametri ġeometriċi (distanza għall-oġġett, orjentazzjoni preferuta tal-oġġett);
  • Xogħlijiet f'kundizzjonijiet tat-temp mhux ikkontrollati, kif ukoll fil-każ ta 'imblukkar parzjali tal-oġġett minn oġġetti barranin;
  • Operazzjoni kompletament awtonoma fuq l-apparat fil-mira, inkluż fin-nuqqas ta 'komunikazzjoni bir-radju;
  • Lista ta 'arkitetturi tal-proċessuri appoġġjati: Elbrus, Baikal, KOMDIV, kif ukoll x86, x86_64, ARM;
  • Lista ta 'sistemi operattivi appoġġjati: Elbrus OS, AstraLinux OS, Atlix OS, kif ukoll MS Windows, macOS, diversi distribuzzjonijiet Linux li jappoġġjaw gcc 4.8, Android, iOS;
  • Żvilupp kompletament domestiku.

Normalment, fil-konklużjoni tal-artikoli tagħna dwar Habré, nipprovdu link għas-suq, fejn kull min juża l-mowbajl tiegħu jista 'tniżżel verżjoni demo tal-applikazzjoni sabiex fil-fatt jevalwa l-prestazzjoni tat-teknoloġija. Din id-darba, b'kont meħud tal-ispeċifiċitajiet tal-applikazzjoni li tirriżulta, nixtiequ li l-qarrejja kollha tagħna qatt f'ħajjithom jiffaċċjaw il-problema li jiddeterminaw malajr jekk tank jappartjenix għal ċertu naħa.

Sors: www.habr.com

Żid kumment