FairMOT, eto kan fun titọpa awọn nkan lọpọlọpọ lori fidio ni iyara

Awọn oniwadi lati Microsoft ati Central China University ni idagbasoke ọna tuntun ti o ga julọ fun titọpa awọn ohun pupọ ninu fidio nipa lilo awọn imọ-ẹrọ ikẹkọ ẹrọ - FairMOT (Itọpa Ohun-elo Olona-pupọ). Koodu pẹlu imuse ọna ti o da lori Pytorch ati awọn awoṣe ikẹkọ atejade lori GitHub.

Pupọ julọ awọn ọna ipasẹ ohun to wa lo awọn ipele meji, ọkọọkan ti a ṣe nipasẹ nẹtiwọọki nkankikan lọtọ. Ni igba akọkọ ti ipele nṣiṣẹ a awoṣe fun a ti npinnu awọn ipo ti awọn ohun ti awọn anfani, ati awọn keji ipele nlo ohun sepo search awoṣe ti a lo lati tun-da awọn ohun kan ati ki o so anchors si wọn.

FairMOT nlo imuse ipele-ọkan kan ti o da lori nẹtiwọọki nkankikan ti o ni idibajẹ (DCNv2, Nẹtiwọọki Convolutional Deformable), eyiti o fun ọ laaye lati ṣaṣeyọri ilosoke akiyesi ni iyara ti ipasẹ ohun. FairMOT n ṣiṣẹ laisi awọn ìdákọró, ni lilo ẹrọ idanimọ lati pinnu awọn aiṣedeede ti awọn ile-iṣẹ ohun lori maapu ohun-itọka pipe. Ni afiwe, ero isise kan ti wa ni ṣiṣe ti o ṣe iṣiro awọn ẹya ara ẹni kọọkan ti awọn nkan ti o le ṣee lo lati ṣe asọtẹlẹ idanimọ wọn, ati module akọkọ n ṣe isọdọkan ti awọn ẹya wọnyi lati ṣe afọwọyi awọn nkan ti awọn iwọn oriṣiriṣi.

FairMOT, eto kan fun titọpa awọn nkan lọpọlọpọ lori fidio ni iyara

Lati ṣe ikẹkọ awoṣe ni FairMOT, apapọ awọn ipilẹ data gbangba mẹfa fun wiwa ati wiwa eniyan ni a lo (ETH, CityPerson, CalTech, MOT17, CUHK-SYSU). A ṣe idanwo awoṣe naa nipa lilo awọn eto idanwo ti awọn fidio 2DMOT15, MOT16, MOT17 и MOT20pese nipa ise agbese Ipenija MOT ati ibora ti awọn ipo oriṣiriṣi, gbigbe kamẹra tabi yiyi, awọn igun wiwo oriṣiriṣi. Idanwo naa fihan pe
FairMOT outstrips sare located si dede TrackRCNN и J.D.E. nigba idanwo lori awọn fireemu 30 fun awọn ṣiṣan fidio keji, n ṣe afihan iṣẹ ṣiṣe to lati ṣe itupalẹ awọn ṣiṣan fidio deede lori fifo.

orisun: opennet.ru

Fi ọrọìwòye kun