FairMOT, një sistem për gjurmimin e shpejtë të objekteve të shumta në video

Studiues nga Microsoft dhe Universiteti Qendror i Kinës zhvilluar një metodë e re me performancë të lartë për gjurmimin e objekteve të shumta në video duke përdorur teknologjitë e mësimit të makinerive - FairMOT (Fair Multi-Object Tracking). Kodi me zbatimin e metodës bazuar në Pytorch dhe modele të trajnuara botuar në GitHub.

Shumica e metodave ekzistuese të gjurmimit të objekteve përdorin dy faza, secila e zbatuar nga një rrjet nervor i veçantë. Faza e parë drejton një model për gjetjen e objekteve me interes, dhe faza e dytë përdor një model kërkimi asociacioni për të riidentifikuar objektet dhe për t'i bashkuar ankorat.

FairMOT përdor një zbatim me një fazë të bazuar në një rrjet nervor konvolucionist të deformueshëm (DCNv2, Rrjeti konvolutional i deformueshëm), i cili ju lejon të arrini një rritje të dukshme të shpejtësisë së gjurmimit të objekteve. FairMOT funksionon pa ankora, duke përdorur një mekanizëm riidentifikimi për të përcaktuar zhvendosjet e qendrave të objekteve në një hartë objekti me saktësi të lartë. Paralelisht, ekzekutohet një procesor që vlerëson veçoritë individuale të objekteve që mund të përdoren për të parashikuar identitetin e tyre dhe moduli kryesor kryen një konvergjencë të këtyre veçorive për të manipuluar objekte të shkallëve të ndryshme.

FairMOT, një sistem për gjurmimin e shpejtë të objekteve të shumta në video

Për të trajnuar modelin në FairMOT, u përdor një kombinim i gjashtë grupeve të të dhënave publike për zbulimin dhe kërkimin e njerëzve (ETH, CityPerson, CalTech, MOT17, CUHK-SYSU). Modeli u testua duke përdorur grupe testimi videosh 2DMOT15, MOT16, MOT17 и MOT20parashikuar nga projekti Sfida MOT dhe mbulimi i situatave të ndryshme, lëvizja ose rrotullimi i kamerës, kënde të ndryshme shikimi. Testimi tregoi se
FairMOT tejkalimet modelet më të shpejta konkurruese TrackRCNN и J.D.E. kur testohet në transmetime video me 30 korniza për sekondë, duke demonstruar performancë të mjaftueshme për të analizuar transmetimet e rregullta video në fluturim.

Burimi: opennet.ru

Shto një koment