Ko nga hangarau me nga tauira mo a maatau punaha tirohanga rorohiko a meake nei i hangaia, i pai haere hoki i roto i nga kaupapa rereke o to taatau kamupene - i roto i te Mēra, Kapua, Rapu. He rite ki te tiihi pai, ki te cognac ranei. I tetahi ra ka mohio matou ko o maatau whatunga neural e whakaatu ana i nga hua tino pai hei whakanui, a ka whakatau matou ki te whakakotahi ki tetahi hua b2b kotahi - Vision - ka whakamahia e matou inaianei ka tuku atu ki a koe.
I tenei ra, ko ta maatau hangarau tirohanga rorohiko i runga i te papaaho Mail.Ru Cloud Solutions kei te angitu te mahi me te whakaoti rapanga mahi tino uaua. I ahu mai i te maha o nga whatunga neural kua whakangungua i runga i o maatau huinga raraunga me te tohunga ki te whakaoti rapanga tono. Ka whakahaerehia nga ratonga katoa i runga i o maatau taputapu. Ka taea e koe te whakauru i te API Tirohanga whanui ki roto i o tono, ma reira e waatea ai nga kaha katoa o te ratonga. He tere te API - he mihi ki nga GPU tūmau, ko te wa whakautu toharite i roto i ta maatau whatunga he 100 ms.
Haere ki te ngeru, he korero taipitopito me te maha o nga tauira o te mahi a Vision.
Hei tauira mo te ratonga e whakamahia ana e matou nga hangarau tohu kanohi kua whakahuahia, ka taea e matou te whakahua . Ko tetahi o ana waahanga ko te Vision photo stands, ka whakauruhia e matou ki nga huihuinga rereke. Mena ka whakatata atu koe ki taua tuunga whakaahua, tangohia he whakaahua me te kaamera kua whakauruhia ki roto ka uru ki to imeera, ka kitea tonu e te punaha i roto i nga momo whakaahua nga mea i hopukina koe e nga kaitango whakaahua o te huihuinga, a, ki te hiahiatia, ka tukuna atu nga whakaahua kua kitea ki a koe ma te imeera. A kaore matou e korero ana mo nga whakaahua whakaahua kua whakaritea—Ka mohio koe ki a koe ahakoa kei muri i te tini o nga manuhiri. Ko te tikanga, ehara i te mea ko te whakaahua e tu ana i a raatau ano e mohiohia ana, he papa noa enei i roto i nga tuunga ataahua e tango whakaahua ana i nga manuhiri me o raatau kamera i hangaia me te tuku korero ki nga kaitoro, kei reira nga mahi makutu mohio katoa. A kua kite matou neke atu i te kotahi te mīharo o te whai huatanga o te hangarau i waenga i nga tohunga mohio whakaahua. Kei raro nei ka korero tatou mo etahi tauira.
1. To tatou tauira Whakaaetanga Kanohi
1.1. Ko te whatunga neural me te tere tukatuka
Mo te mohiotanga, ka whakamahia e matou he whakarereketanga o te tauira whatunga neural ResNet 101. Ko te Huihuinga Toharite i te mutunga ka whakakapihia e te paparanga hono katoa, he rite ki te mahi i roto i te ArcFace. Heoi, ko te rahi o nga whakaaturanga vector he 128, ehara i te 512. Ko ta matou huinga whakangungu kei roto i te 10 miriona whakaahua o te 273 tangata.
Ka tere te rere o te tauira na te hoahoanga whirihoranga tūmau me te rorohiko GPU i ata whiriwhiria. Mai i te 100 ms ki te whiwhi urupare mai i te API i runga i o maatau whatunga o roto - kei roto i tenei ko te kitenga kanohi (te kimi kanohi i te whakaahua), te mohio me te whakahoki mai i te PersonID i te whakautu API. Na te nui o nga raraunga taumai - nga whakaahua me nga ataata - ka nui ake te wa ki te whakawhiti i nga raraunga ki te ratonga me te whiwhi whakautu.
1.2. Te aromatawai i te whai huatanga o te tauira
Engari ko te whakatau i te pai o nga whatunga neural he mahi tino rangirua. Ko te kounga o a raatau mahi e whakawhirinaki ana ki nga huinga raraunga i whakangunguhia nga tauira me te mea i arotauhia mo te mahi me nga raraunga motuhake.
I timata matou ki te arotake i te tika o to maatau tauira me te whakamatautau manatoko LFW rongonui, engari he iti rawa, he ngawari hoki. Ka tae ki te 99,8% te tika, kua kore e whai hua. He whakataetae pai mo te arotake i nga tauira ahukahuka - Megaface, i eke ai matou ki te 82% te taumata 1. Ko te whakamatautau Megaface he miriona nga whakaahua - he kaiwhakararuraru - a me kaha te tauira ki te wehewehe i nga mano tini o nga whakaahua rongonui mai i te Facescrub huingararaunga mai i nga kaiwhakararuraru. Heoi, i te whakawātea i te whakamātautau Megaface mō ngā hapa, ka kitea e mātou nā te putanga whakawātea ka tutuki i a mātou te tika o te 98% te taumata 1 (he tino motuhake nga whakaahua o te hunga rongonui). Na reira, i hangaia e ratou he whakamatautau tohu motuhake, he rite ki a Megaface, engari me nga whakaahua o nga tangata "noa". Na ka whakapai ake matou i te tika o te mohiotanga ki o matou huingararaunga me te haere ki mua. I tua atu, ka whakamahia e matou he whakamatautau kounga huinga he maha nga mano whakaahua; ka whakatauira i te tohu kanohi ki te kapua o te kaiwhakamahi. I tenei take, ko nga tautau he roopu o nga tangata rite, kotahi roopu mo ia tangata mohio. I tirohia e matou te kounga o nga mahi i runga i nga roopu tuuturu (pono).
Ko te tikanga, ka puta nga hapa mohio ki tetahi tauira. Engari ko nga ahuatanga penei ka whakatauhia ma te whakatikatika i nga paepae mo nga tikanga motuhake (mo nga huihuinga katoa ka whakamahia e matou nga paepae kotahi, engari, hei tauira, mo nga punaha whakahaere uru me tino whakanuia e matou nga paepae kia iti ake ai nga painga teka). Ko te nuinga o nga manuhiri o te huihuinga i tino mohiohia e o maatau whare whakaahua Vision. I etahi wa ka titiro tetahi ki te arokite kua tapahia ka mea, "I he to punaha, ehara i ahau." Katahi ka whakatuwherahia e matou te katoa o te whakaahua, ka kitea ko tenei manuhiri kei roto i te whakaahua, engari kaore matou i te whakaahua i a ia, engari ko tetahi atu, ko te tangata i tu ki muri i te waahi pouri. I tua atu, he maha tonu te mohio o te whatunga neural ahakoa karekau e kitea tetahi waahanga o te kanohi, kei te tu te tangata i roto i te whaarangi, ahakoa he hawhe-huri. Ka taea e te punaha te mohio ki tetahi tangata ahakoa ko te kanohi kei roto i te waahi o te whakakorikori kanohi, penei, i te wa e pupuhi ana me te arotahi koki whanui.
1.3. Ko nga tauira o te whakamatautau i nga waahi uaua
Kei raro nei nga tauira o te mahi a to tatou whatunga neural. Ka tukuna nga whakaahua ki te whakaurunga, me tapaina e ia ma te whakamahi i te PersonID - he tohu motuhake mo te tangata. Mena e rua, neke atu ranei nga whakaahua he rite te ID, na, e ai ki nga tauira, ko enei whakaahua e whakaatu ana i te tangata kotahi.
Kia mahara tonu tatou i te wa e whakamatautau ana, ka whai waahi tatou ki nga momo tawhā me nga paepae tauira ka taea e tatou te whirihora ki te whakatutuki i tetahi hua. Ko te API tūmatanui kua arotauhia mo te tino tika mo nga keehi noa.
Me timata ma te mea ngawari noa iho, me te whakamohio kanohi ki mua.
Ana, he ngawari rawa tera. Kia whakaraeraehia te mahi, taapirihia he pahau me etahi tau.
Ko etahi ka kii ehara i te mea uaua rawa tenei, na te mea i nga keehi e rua ka kitea te mata katoa, a he maha nga korero mo te kanohi e waatea ana ki te algorithm. Kaati, me huri a Tom Hardy hei tohu. He tino uaua tenei raruraru, a he nui te whakapau kaha ki te whakaoti angitu i te wa e mau tonu ana te iti o te reeti hapa: i tohua e matou he huinga whakangungu, i whakaarohia ma te hoahoanga o te whatunga neural, i whakanui i nga mahi ngaro me te whakapai ake i nga mahi o mua. o nga whakaahua.
Me whakakakahu tatou i te potae ki runga ki a ia:
Ma te ara, he tauira tenei mo tetahi ahuatanga tino uaua, na te mea ka tino huna te mata, a kei te whakaahua o raro kei reira ano te atarangi hohonu e huna ana i nga kanohi. I roto i te ora tonu, he maha nga wa ka huri te tangata i o raatau ahua me te awhina o nga karaihe pouri. Kia pena ano tatou ki a Tom.
Kaati, me ngana ki te maka whakaahua mai i nga reanga rereke, a i tenei wa ka whakamatau tatou me tetahi atu kaiwhakaari. Me tango i tetahi tauira tino uaua, kei reira nga huringa e pa ana ki te tau ka tino whakahuahia. Ko te ahuatanga kaore i tino kitea; he maha nga wa ka hiahia koe ki te whakataurite i te whakaahua i roto i te uruwhenua me te kanohi o te kaimau. I muri i nga mea katoa, ka taapirihia te whakaahua tuatahi ki te uruwhenua ka 20 nga tau o te rangatira, a ka tae ki te 45 tau ka taea e te tangata te whakarereke nui:
Ki to whakaaro ko te tohunga nui mo nga misioni kaore i tino rerekee i nga tau? Ki taku whakaaro ahakoa he ruarua noa nga tangata ka whakakotahi i nga whakaahua o runga me raro, kua tino rerekee te tamaiti i roto i nga tau.
He maha ake nga huringa o te ahua o nga whatunga neural. Hei tauira, i etahi wa ka taea e nga wahine te whakarereke i o raatau ahua me te awhina o nga whakapaipai:
Inaianei me whakararu ake te mahi: ki te mea he rereke nga waahanga o te kanohi kua hipokina ki nga whakaahua rereke. I enei ahuatanga, kaore e taea e te algorithm te whakataurite i nga tauira katoa. Heoi, he pai te whakahaere a Vision i nga ahuatanga penei.
Ae ra, he maha nga kanohi kei roto i tetahi whakaahua; hei tauira, neke atu i te 100 nga tangata ka uru ki roto i te whakaahua whanui o te horo. He ahua uaua tenei mo nga whatunga neural, i te mea he maha nga kanohi ka taea te whakamarama rereke, ko etahi kaore i te arotahi. Heoi, ki te tangohia te whakaahua me te taumira me te kounga (i te iti rawa 75 pika mo ia tapawha e kapi ana i te mata), ka taea e Vision te kite me te mohio.
Ko te ahuatanga o nga whakaahua purongo me nga whakaahua mai i nga kaamera tirotiro he maha nga wa e pouri ana te tangata na te mea kaore i te arotahi, kei te neke ranei i taua wa:
Ano, ka rereke te kaha o te rama mai i tetahi ahua ki tetahi ahua. Ko tenei hoki, ka waiho hei tutukitanga waewae; he maha nga algorithms he uaua ki te tukatuka tika i nga whakaahua he pouri rawa, he marama rawa hoki, me te kore e kii ki te whakarite tika. Me whakamahara koe ki te whakatutuki i tenei hua me whirihora e koe nga paepae i runga i tetahi huarahi; kaore ano tenei waahanga i te waatea noa. Ka whakamahi matou i te whatunga neural kotahi mo nga kiritaki katoa; he paepae e tika ana mo te nuinga o nga mahi mahi.
Ina tata nei i whakaputahia e matou he tauira hou o te tauira e mohio ana ki nga kanohi o Ahia me te tino tika. He raru nui tenei i mua, i kiia ko "ako miihini" (he "whatunga neural ranei") he kaikiri. Ko nga hononga neural Pakeha me Amerika i mohio he pai nga kanohi o Caucasian, engari ki nga kanohi Mongoloid me Negroid he kino rawa atu te ahuatanga. Akene, i Haina he rereke te ahua. Ko te mea katoa mo nga huinga raraunga whakangungu e whakaatu ana i nga momo tangata rangatira o tetahi whenua. Heoi, kei te huri haere te ahuatanga, i tenei ra kaore tenei raru i te tino kaha. Kaore he raruraru o te tirohanga ki nga tangata o nga iwi rereke.
Ko te tohu kanohi tetahi noa o nga tono maha o a maatau hangarau; Ka taea te whakangungu te tirohanga ki te mohio ki tetahi mea. Hei tauira, pereti raihana, tae atu ki nga tikanga uaua mo nga algorithms: i nga koki koi, paru me te uaua ki te panui i nga pereti raihana.
2. Ko nga keehi whakamahi whaitake
2.1. Mana uru-a-tinana: ina whakamahi nga tangata tokorua i te paahi kotahi
Ma te awhina o Vision, ka taea e koe te whakatinana i nga punaha mo te tuhi i te taenga mai me te wehe atu o nga kaimahi. Ko te punaha tuku iho i runga i nga paahi hiko he tino ngoikoretanga, hei tauira, ka taea e koe te tuku i nga tangata e rua ma te whakamahi i te tohu kotahi. Mena ka taapirihia te punaha mana uru (ACS) ki te Vision, ka tuhi pono ko wai i haere mai/i mahue mai me te wa.
2.2. Te wa aroturuki
Ko tenei keehi whakamahi Vision e hono tata ana ki te waa o mua. Mena ka taapirihia e koe te punaha uru me ta maatau ratonga tohu kanohi, ka kore noa e kitea nga takahi mana uru, engari ki te rehita i te noho tonu o nga kaimahi i roto i te whare, i te whare ranei. I etahi atu kupu, ka awhina a Vision i a koe ki te whakaaro pono ko wai i haere mai ki te mahi me te wehe atu i tehea wa, a ko wai i peke katoa i te mahi, ahakoa ka hipokina e ana hoa mahi i mua i ona rangatira.
2.3. Ataata Ataata: Aroturuki Tangata me te Haumarutanga
Ma te whai i nga taangata ma te whakamahi i te Matakite, ka taea e koe te aromatawai tika i nga waka o nga waahi hokohoko, nga teihana tereina, nga huarahi, nga tiriti me etahi atu waahi whanui. Ka taea hoki e ta maatau whainga te awhina nui ki te whakahaere urunga, hei tauira, ki te whare putunga, ki etahi atu waahi tari nui ranei. Ae ra, ko te whai i nga tangata me nga kanohi ka awhina i te whakaoti rapanga haumarutanga. I mau te tangata e tahae ana i to toa? Taapirihia tana PersonID, i whakahokia mai e Vision, ki te rarangi pango o to rorohiko wetewete riipene ataata, a hei muri ake ka whakamohio tonu te punaha i te haumarutanga mena ka puta ano tenei momo.
2.4. I roto i te hokohoko
Ko nga umanga hokohoko me nga momo umanga ratonga e hiahia ana ki te mohio ki nga rarangi. Ma te awhina o Vision, ka taea e koe te mohio ehara tenei i te marea ohorere o nga tangata, engari he rarangi, me te whakatau i tona roa. Na ka whakamohio atu te punaha ki te hunga e whakahaere ana mo te tutira kia mohio ratou ki te ahuatanga: kei te uru mai nga manuhiri me waea atu etahi atu kaimahi, kei te ngoikore ranei tetahi ki a raatau mahi.
Ko tetahi atu mahi whakamere ko te wehe i nga kaimahi o te kamupene i roto i te horo mai i nga manuhiri. Ko te tikanga, ka whakangunguhia te punaha ki te wehe i nga taonga e mau ana i etahi kakahu (waehere kakahu) me etahi ahuatanga motuhake ranei (he kameta waitohu, he tohu kei te pouaka, me etahi atu). Ka awhina tenei ki te aromatawai tika ake i te taenga mai (kia kore nga kaimahi e "whakanuia" nga tatauranga o nga tangata i roto i te whare ma te noho noa).
Ma te whakamahi i te tohu kanohi, ka taea hoki e koe te arotake i to hunga whakarongo: he aha te pono o nga manuhiri, ara, e hia nga tangata e hoki mai ana ki to whakaturanga me te aha te waa. Tātaihia te maha o nga manuhiri ahurei ka tae mai ki a koe ia marama. Ki te arotau i nga utu mo te kukume me te pupuri, ka kitea ano e koe te huringa o nga waka i runga i te ra o te wiki me te waa o te ra.
Ka taea e nga Franchisors me nga kamupene mekameka te tono i te aromatawai i runga i nga whakaahua o te kounga o te waitohu o nga momo toa hokohoko: te aroaro o nga waitohu, nga tohu, nga panui, nga kara, me era atu.
2.5. Ma te kawe
Ko tetahi atu tauira mo te whakapumautanga ma te whakamahi i nga tātaritanga ataata ko te tautuhi i nga taonga kua whakarerea i roto i nga whare rererangi o nga teihana tereina ranei. Ka taea te whakangungu i te tirohanga ki te mohio ki nga taonga o nga rau o nga karaehe: nga taonga, nga putea, nga peke, nga hamarara, nga momo kakahu, nga pounamu, me era atu. Mena ka kitea e to punaha tātari ataata he ahanoa kore rangatira ka mohio ki te whakamahi i te Vision, ka tukuna he tohu ki te ratonga haumarutanga. He rite te mahi e pa ana ki te kitenga aunoa o nga ahuatanga rereke i nga waahi whanui: ka mate te tangata, ka paowa tetahi ki te waahi he, ka taka ranei te tangata ki runga i te reriwe, me era atu - ka taea e enei tauira katoa te mohio e nga punaha tātari ataata. na roto i te Vision API.
2.6. Te rere tuhinga
Ko tetahi atu tono whakamere o te Matakite kei te whanakehia e matou i tenei wa ko te whakamohiotanga tuhinga me o raatau wetewete ki nga papaa raraunga. Engari ki te whakauru-a-ringa (he kino atu ranei, te whakauru) nga raupapa mutunga, nga nama, nga ra o te whakaputanga, nga nama kaute, nga taipitopito peeke, nga ra me nga waahi whanau me te maha atu o nga raraunga whaimana, ka taea e koe te matawai i nga tuhinga me te tuku aunoa i runga i te hongere haumaru ma te API ki te kapua, ka mohio te punaha ki enei tuhinga i runga i te rere, ka poroporoaki me te whakahoki mai i te whakautu me nga raraunga i roto i te whakatakotoranga e hiahiatia ana mo te urunga aunoa ki te papaarangi. I tenei ra kua mohio a Vision ki te whakarōpū i nga tuhinga (tae atu ki te PDF) - he wehewehe i waenga i nga uruwhenua, SNILS, TIN, tiwhikete whanau, tiwhikete marena me etahi atu.
Ko te tikanga, kaore e taea e te whatunga neural te whakahaere i enei ahuatanga katoa i waho o te pouaka. I ia keehi, ka hangaia he tauira hou mo tetahi kaihoko motuhake, he maha nga ahuatanga, nga ahuatanga me nga whakaritenga ka whakaarohia, ka tohua nga huinga raraunga, ka mahia nga mahi whakangungu, whakamatautau, me te whirihoranga.
3. Kaupapa mahi API
Ko te "kuwaha tomokanga" mo nga kaiwhakamahi ko te REST API. Ka taea e ia te tango whakaahua, konae ataata me nga panui mai i nga kamera whatunga (nga awa RTSP) hei whakaurunga.
Hei whakamahi i te Vision, me hiahia koe i roto i te ratonga Mail.ru Cloud Solutions ka whiwhi tohu urunga (client_id + client_secret). Ka mahia te motuhēhēnga kaiwhakamahi mā te kawa OAuth. Ko nga raraunga puna i roto i nga tinana o nga tono POST ka tukuna ki te API. A, hei whakautu, ka whiwhi te kiritaki mai i te API he hua whakamohiotanga i roto i te whakatakotoranga JSON, a ko te whakautu he hanganga: kei roto nga korero mo nga mea kua kitea me o raatau taunga.
Tauira whakautu
{
"status":200,
"body":{
"objects":[
{
"status":0,
"name":"file_0"
},
{
"status":0,
"name":"file_2",
"persons":[
{
"tag":"person9"
"coord":[149,60,234,181],
"confidence":0.9999,
"awesomeness":0.45
},
{
"tag":"person10"
"coord":[159,70,224,171],
"confidence":0.9998,
"awesomeness":0.32
}
]
}
{
"status":0,
"name":"file_3",
"persons":[
{
"tag":"person11",
"coord":[157,60,232,111],
"aliases":["person12", "person13"]
"confidence":0.9998,
"awesomeness":0.32
}
]
},
{
"status":0,
"name":"file_4",
"persons":[
{
"tag":"undefined"
"coord":[147,50,222,121],
"confidence":0.9997,
"awesomeness":0.26
}
]
}
],
"aliases_changed":false
},
"htmlencoded":false,
"last_modified":0
}Kei roto i te whakautu he tino whakamataku tawhā - koinei te "ahuatanga" o te kanohi i roto i te whakaahua, me tana awhina ka kowhiria e matou te kopere pai o te kanohi mai i te raupapa. I whakangungua e matou he whatunga neural ki te matapae i te ahua ka pai ki tetahi whakaahua i runga i nga whatunga hapori. Ko te pai ake o te kounga o te whakaahua me te ataata ake o te kanohi, ka nui ake te whakamataku.
Ka whakamahia e te API Vision tetahi ariā e kiia ana ko te waahi. He taputapu tenei mo te hanga huinga momo kanohi. Ko nga tauira o nga waahi ko nga rarangi pango me nga ma, nga rarangi manuhiri, nga kaimahi, nga kaihoko, me etahi atu. mo ia tohu. Ano, ko te maha o nga tohu mo ia kaute kaore i te iti.
I tenei ra kei te tautoko te API i nga tikanga rapunga me nga tikanga e whai ake nei:
- Tautuhi/Tautuhi - te kimi me te mohio ki nga kanohi. Hoatu aunoatia he PersonID ki ia tangata motuhake, ka whakahoki i te PersonID me nga taunga o nga tangata kua kitea.
- Mukua - te whakakore i tetahi PersonID tauwhāiti mai i te pātengi raraunga tangata.
- Truncate - ka ūkui i te mokowā katoa mai i te PersonID, ka whai hua mena i whakamahia hei waahi whakamatautau ka hiahia koe ki te tautuhi ano i te papanga raraunga mo te hanga.
- Rapu - te kitenga o nga mea, nga tirohanga, nga pereti raihana, nga tohu whenua, nga rarangi, me era atu.
- Rapua mo nga tuhinga - ka kitea nga momo tuhinga motuhake o te Russian Federation (te wehewehe i te uruwhenua, SNILS, tau tautuhi taake, me etahi atu).
Ka mutu ano ta matou mahi mo nga tikanga mo te OCR, te whakatau i te ira tangata, te pakeke me te kare-a-roto, me te whakaoti rapanga hokohoko, ara, mo te whakahaere aunoa i te whakaaturanga o nga taonga ki nga toa. Ka kitea e koe nga tuhinga API katoa i konei:
4. Whakamutunga
Inaianei, na roto i te API whanui, ka taea e koe te uru atu ki te tohu kanohi ki nga whakaahua me nga riipene whakaata; ka tautokohia te tautuhi i nga momo taonga, pereti raihana, tohu whenua, tuhinga me nga tirohanga katoa. Nga ahuatanga tono - te moana. Haere mai, whakamatau i ta maatau ratonga, whakatauhia nga mahi tino uaua. Ko nga whakawhitinga tuatahi 5000 he kore utu. Ka waiho pea hei "whakauru ngaro" mo o kaupapa.
Ka taea e koe te uru atu ki te API i runga i te rehitatanga me te hononga. . Ka whiwhi nga kaiwhakamahi Habra katoa he waehere whakatairanga mo etahi atu whakawhitinga. Tena koa tuhia mai ki ahau te wahitau imeera i whakamahia e koe ki te rehita i to putea!
Source: will.com