В nou te pale sou seri tan previzyon. Yon kontinyasyon lojik ta dwe yon atik sou idantifye anomali.
Aplikasyon
Yo itilize deteksyon anomali nan zòn tankou:
1) Prediksyon pann ekipman yo
Kidonk, an 2010, viris Stuxnet te atake santrifujeur Iranyen yo, ki te mete ekipman an nan operasyon ki pa pi bon epi li te enfim kèk nan ekipman yo akòz mete akselere.
Si yo te itilize algoritm deteksyon anomali sou ekipman an, sitiyasyon echèk la te kapab evite.
Se rechèch la pou anomali nan operasyon an nan ekipman yo itilize pa sèlman nan endistri nikleyè a, men tou, nan metaliji ak operasyon an nan turbin avyon. Ak nan lòt zòn kote itilize nan dyagnostik prediksyon se pi bon mache pase pèt posib akòz yon pann enprevizib.
2) Prediksyon fwod
Si yo retire lajan nan kat ou itilize a nan Podolsk nan Albani, tranzaksyon yo ka bezwen plis tcheke.
3) Idantifikasyon modèl konsomatè ki pa nòmal
Si kèk kliyan montre yon konpòtman nòmal, ka gen yon pwoblèm ke ou pa okouran de.
4) Idantifikasyon demann ak chaj nòmal
Si lavant nan yon magazen FMCG te tonbe pi ba pase entèval konfyans nan pwevwa a, li vo jwenn rezon ki fè pou sa k ap pase.
Apwòch pou idantifye anomali yo
1) Sipòte machin vektè ak yon sèl klas yon sèl-klas SVM
Apwopriye lè done yo nan seri fòmasyon an swiv yon distribisyon nòmal, men seri tès la gen anomali.
Machin vektè sipò nan yon sèl klas konstwi yon sifas ki pa lineyè alantou orijin nan. Li posib pou mete yon limit pou done yo konsidere kòm anomal.
Dapre eksperyans ekip DATA4 nou an, One-Class SVM se algorithm ki pi souvan itilize pou rezoud pwoblèm pou jwenn anomali yo.
2) izole metòd forè
Avèk metòd "o aza" pou konstwi pye bwa, emisyon yo pral antre nan fèy yo nan premye etap yo (nan yon pwofondè pa fon nan pye bwa a), i.e. emisyon yo pi fasil pou "izole". Izolasyon valè anomali rive nan premye iterasyon algorithm la.
3) Anvlòp eliptik ak metòd estatistik
Itilize lè done yo distribye nòmalman. Plis mezi a se pi pre ke melanj distribisyon an, plis valè a anòmal.
Lòt metòd estatistik yo ka enkli tou nan klas sa a.
Imaj soti nan dyakonov.org
4) Metòd metrik
Metòd yo enkli algoritm tankou k-vwazen ki pi pre, k-vwazen ki pi pre, ABOD (deteksyon ki baze sou ang) oswa LOF (faktè lokal).
Apwopriye si distans ki genyen ant valè yo nan karakteristik yo ekivalan oswa nòmalize (pou yo pa mezire yon boa constrictor nan jako).
Algorithm k-pi pre vwazen an sipoze ke valè nòmal yo sitiye nan yon sèten rejyon nan espas miltidimansyonèl, ak distans la nan anomali yo pral pi gran pase nan hyperplane ki separe.
5) Metòd Cluster
Sans nan metòd grap se ke si yon valè se pi plis pase yon sèten kantite lwen sant yo grap, valè a ka konsidere kòm anomal.
Bagay pwensipal lan se sèvi ak yon algorithm ki kòrèkteman grap done yo, ki depann sou travay la espesifik.
6) Metòd eleman prensipal
Apwopriye kote direksyon yo nan pi gwo chanjman nan dispèsyon yo make.
7) Algoritm ki baze sou previzyon seri tan
Lide a se ke si yon valè tonbe andeyò entèval konfyans prediksyon an, valè a konsidere kòm anomal. Pou predi yon seri tan, yo itilize algoritm tankou trip atenuasyon, S(ARIMA), ranfòse, elatriye.
Algoritm previzyon seri tan yo te diskite nan atik anvan an.
8) Aprantisaj sipèvize (regression, klasifikasyon)
Si done yo pèmèt, nou itilize algoritm ki sòti nan regresyon lineyè ak rezo frekan. Ann mezire diferans ki genyen ant prediksyon an ak valè aktyèl la, epi tire yon konklizyon nan ki pwen done yo devye de nòmal la. Li enpòtan pou algorithm la gen ase jeneralizasyon kapasite epi ke seri fòmasyon an pa gen valè anomali.
9) Tès modèl
Ann apwoche pwoblèm pou chèche anomali kòm yon pwoblèm pou chèche rekòmandasyon. Ann dekonpoze matris karakteristik nou an lè l sèvi avèk SVD oswa machin faktè faktè, epi pran valè yo nan nouvo matris la ki siyifikativman diferan de sa yo orijinal yo kòm anomal.
Imaj soti nan dyakonov.org
Konklizyon
Nan atik sa a, nou revize apwòch prensipal yo nan deteksyon anomali.
Jwenn anomali yo ka nan plizyè fason yo rele yon atizay. Pa gen okenn algorithm ideyal oswa apwòch, itilizasyon ki rezoud tout pwoblèm. Pi souvan yo itilize yon seri metòd pou rezoud yon ka espesifik. Deteksyon anomali fèt lè l sèvi avèk machin vektè sipò yon sèl klas, izole forè, metòd metrik ak gwoup, osi byen ke lè l sèvi avèk eleman prensipal yo ak previzyon seri tan.
Si ou konnen lòt metòd, ekri sou yo nan kòmantè yo nan atik la.
Sous: www.habr.com