FairMOT, система барои зуд пайгирии объектҳои сершумор дар видео

Тадқиқотчиёни Microsoft ва Донишгоҳи Марказии Чин таҳия кардаанд усули нави баландсифат барои пайгирии объектҳои сершумор дар видео бо истифода аз технологияҳои омӯзиши мошин - FairMOT (Fair Multi-Object Tracking). Рамз бо татбиқи усул дар асоси Pytorch ва моделҳои таълимшуда нашр кардааст дар GitHub.

Аксари усулҳои мавҷудаи пайгирии объектҳо ду марҳиларо истифода мебаранд, ки ҳар кадоме аз ҷониби шабакаи алоҳидаи нейрон амалӣ карда мешаванд. Дар марҳилаи аввал модели муайян кардани ҷойгиршавии объектҳои мавриди таваҷҷӯҳ кор мекунад ва дар марҳилаи дуюм модели ҷустуҷӯии ассотсиатсия истифода мешавад, ки барои аз нав муайян кардани объектҳо ва пайваст кардани лангарҳо ба онҳо истифода мешавад.

FairMOT татбиқи якмарҳиларо дар асоси шабакаи нейронии деформатсияшавандаи конволютсионӣ истифода мебарад (DCNv2, Шабакаи Convolutional Deformable), ки ба шумо имкон медиҳад, ки ба афзоиши назарраси суръати пайгирии объект ноил шавед. FairMOT бе лангар кор мекунад, бо истифода аз механизми муайянкунии дубора барои муайян кардани ҷуброни марказҳои объектҳо дар харитаи объекти дақиқ. Дар баробари ин протсессоре иҷро карда мешавад, ки хусусиятҳои инфиродии объектҳоро баҳо медиҳад, ки онҳоро барои пешгӯии шахсияти онҳо истифода бурдан мумкин аст ва модули асосӣ конвергенсияи ин хусусиятҳоро барои коркарди объектҳои миқёси гуногун иҷро мекунад.

FairMOT, система барои зуд пайгирии объектҳои сершумор дар видео

Барои омӯзонидани модел дар FairMOT, маҷмӯи шаш маҷмӯаи маълумоти ҷамъиятӣ барои ошкор ва ҷустуҷӯи одамон истифода шуд (ETH, CityPerson, CalTech, MOT17, CUHK-SYSU). Модел бо истифода аз маҷмӯаҳои санҷишии видео санҷида шуд 2DMOT15, MOT16, MOT17 и MOT20ки аз тарафи лоиха пешбинй шудааст Мушкилоти MOT ва фарогирии ҳолатҳои гуногун, ҳаракат ё гардиши камера, кунҷҳои гуногуни тамошо. Санчиш нишон дод
FairMOT пеш аст моделҳои зудтарин рақобат TrackRCNN и ҶДЕ вақте ки дар 30 кадр дар як сония ҷараёнҳои видео санҷида мешавад, нишон медиҳад, ки иҷрои кофӣ барои таҳлили ҷараёнҳои видеоии муқаррарӣ дар парвоз кофӣ аст.

Манбаъ: opennet.ru

Илова Эзоҳ