Me pehea ta matou whakahaere i nga panui

Me pehea ta matou whakahaere i nga panui

Ko ia ratonga ka taea e nga kaiwhakamahi te hanga i o raatau ake ihirangi (UGC - Ihirangi i hangaia e te Kaiwhakamahi) ka akiakihia kia kaua e whakaoti rapanga pakihi, engari ki te whakatakoto i nga mea i roto i te UGC. Ka taea e te whakaōrite ihirangi rawakore, iti-kounga te whakaiti i te ataahua o te ratonga mo nga kaiwhakamahi, ka mutu tana mahi.

I tenei ra ka korero matou ki a koe mo te mahi tahi i waenga i a Yula me Odnoklassniki, e awhina ana i a maatau ki te whakatikatika i nga panui ki a Yula.

He mea tino whai hua te mahi tahi, a, i te ao hou, ka tere te huri o nga hangarau me nga ahuatanga, ka huri hei whakaora. He aha te moumou rawa iti me te taima ki te tito i tetahi mea kua oti te hanga, kua mau mai ki to hinengaro i mua i a koe?

He rite tonu ta matou whakaaro i te wa e pa ana matou ki te mahi katoa o te whakariterite i nga ihirangi kaiwhakamahi - pikitia, tuhinga me nga hononga. Ka tukuna e a maatau kaiwhakamahi nga miriona waahanga ihirangi ki a Yula i ia ra, me te kore he tukatuka aunoa kaore e taea te whakarereke i enei raraunga katoa.

Na reira, i whakamahia e matou he papa whakaōrite kua rite, i taua wa kua oti o maatau hoa mahi mai i Odnoklassniki ki te ahua "tata ki te tino pai."

He aha a Odnoklassniki?

Ia ra, tekau miriona nga kaiwhakamahi ka haere mai ki te whatunga hapori me te whakaputa i nga piriona o nga waahanga ihirangi: mai i nga whakaahua ki nga ataata me nga tuhinga. Ko te Odnoklassniki whakaōrite tūāpapa e awhina ana ki te tirotiro i nga pukapuka nui rawa atu o nga raraunga me te aukati i nga mokomoko me nga potae.

He maha nga wheako kua kohia e te roopu whakaōrite OK, i te mea kua 12 tau tana whakapai ake i tana taputapu. He mea nui kia kore e taea e ratou anake te tiri i a raatau otinga kua rite, engari me whakarite ano hoki te hoahoanga o to raatau papaaho kia pai ki a maatau mahi motuhake.

Me pehea ta matou whakahaere i nga panui

Mai i tenei wa, mo te poto, ka kiia noa e matou te papaaawhakarite OK "turanga."

Me pehea te mahi o nga mea katoa

Ko te whakawhiti raraunga i waenga i a Yula me Odnoklassniki ka whakapumautia ma te Apache Kafka.

He aha matou i whiriwhiri ai i tenei taputapu:

  • I te Yula, ko nga panui katoa he pou-whakahaere, na i te tuatahi kaore i hiahiatia he whakautu tukutahi.
  • Mena ka puta he kowae kino ka kore e waatea a Yula, Odnoklassniki ranei, tae atu ki etahi o nga taumahatanga teitei, ka kore nga raraunga mai i Kafka e ngaro ki hea ka taea te panui i muri mai.
  • Kua whakauruhia te papaahi ki a Kafka, no reira kua whakatauhia te nuinga o nga take haumarutanga.

Me pehea ta matou whakahaere i nga panui

Mo ia panui i hangaia, i whakarerekehia ranei e te kaiwhakamahi i Yula, ka hangaia he JSON me nga raraunga, ka whakanohoia ki Kafka mo te whakatikatika i muri mai. Mai i Kafka, ka utaina nga panui ki roto i te papaahi, ka whakatau aunoatia, ma te ringaringa ranei. Ko nga panui kino ka aukatihia he take, a ko nga mea kaore e kitea e te papaahi nga takahi ka tohua he "pai." Na ka tukuna nga whakatau katoa ki a Yula ka tono ki te ratonga.

I te mutunga, mo Yula ka heke katoa ki nga mahi ngawari: tukuna he panui ki te papaahi Odnoklassniki ka whakahoki mai i te whakataunga "ok", he aha ranei kaore "ok".

Tukatuka aunoa

He aha te mea ka pa ki te panui i muri i tana pa ki te turanga? Kua wehea ia panui ki etahi hinonga maha:

  • Ingoa,
  • whakaahuatanga,
  • whakaahua,
  • kāwai i tīpakohia e te kaiwhakamahi me te kāwai iti o te pānuitanga,
  • utu

Me pehea ta matou whakahaere i nga panui

Ka mahia e te tüäpapa he whakaropu mo ia hinonga ki te kimi taarite. I tua atu, ka whakarōpūhia nga tuhinga me nga whakaahua i runga i nga kaupapa rereke.

I mua i te whakarōpūtanga, ka whakatauhia nga tuhinga ki te tango i nga tohu motuhake, nga reta rereke me etahi atu para. Ka wehea nga raraunga kua riro ki roto i nga karamu-N, kua hashed ia o enei. Ko te hua he maha nga tohu ahurei. Ko te rite i waenga i nga tuhinga ka whakatauhia e Te ine a Jaccard i waenganui i nga huinga hua e rua. Mena he nui ake te rite i te paepae, ka hanumi nga tuhinga ki tetahi tautau. Hei tere ake te rapu mo nga tautau rite, ka whakamahia te MinHash me te Hashing-tairongo-a-rohe.

He maha nga whiringa mo te whakapiri whakaahua kua hangaia mo nga whakaahua, mai i te whakatairite i nga pikitia pHash ki te rapu i nga taarua ma te whakamahi i te whatunga neural.

Ko te tikanga whakamutunga ko te tino "kino". Hei whakangungu i te tauira, ka tohua nga taarua o nga whakaahua (N, A, P) kaore te N e rite ki a A, me te P he rite ki a A (he ahua-ruarua). Na ka ako te whatunga neural ki te hanga i te A me te P kia tata rawa atu, me te A me te N ka taea. He iti ake nga hua teka ka whakatauritea ki te tango noa i nga whakaurunga mai i te whatunga kua whakangungua.

Ina whiwhi te whatunga neural i nga whakaahua hei whakaurunga, ka mahia e ia he vector ahu-N(128) mo ia tangata, ka tukuna he tono ki te aromatawai i te tata o te ahua. Whai muri, ka tatauhia he paepae e kiia ai nga whakaahua tata he taarua.

Ka taea e te tauira te kimi i nga kaipahua e whakaahua ana i taua hua mai i nga kokonga rereke hei karo i te whakataurite pHash.

Me pehea ta matou whakahaere i nga panuiMe pehea ta matou whakahaere i nga panui
He tauira o nga whakaahua mokowhiti i whakapirihia e te whatunga neural hei taarua.

I te waahanga whakamutunga, ka rapua nga panui takirua ma te tuhinga me te ahua.

Mena ka piri tahi nga panui e rua, neke atu ranei i roto i te kapoi, ka tiimata te punaha ki te aukati aunoa, ma te whakamahi i etahi algorithms, ka kowhiri ko wai nga taarua hei muku me tehea ka waiho. Hei tauira, mena he rite nga whakaahua o nga kaiwhakamahi e rua i roto i te panui, ka aukatihia e te punaha te panui hou ake nei.

Ina oti te hanga, ka haere nga tautau katoa i roto i te raupapa whiriwhiringa aunoa. Ka tautapahia e ia tātari he kaute ki te tautau: me pehea te ahua kei roto i te riri ka tohua e tenei tātari.

Hei tauira, ka tātarihia e te punaha te whakaahuatanga i roto i tetahi panui ka kowhiri i nga waahanga ka taea. Na ka tango i te mea he nui te tupono ka whakataurite ki te waahanga kua tohua e te kaituhi o te panui. Ki te kore e taurite, ka aukatihia te panui mo te waahanga he. A, i te mea he atawhai, he pono ta matou, ka korero tika matou ki te kaiwhakamahi ko tehea waahanga me whiriwhiri e ia kia pai ai te panui.

Me pehea ta matou whakahaere i nga panui
Whakamōhiotanga mo te aukati mo te kāwai hē.

He pai te ako miihini ki te kaainga i to maatau papaahi. Hei tauira, me tana awhina ka rapuhia e matou nga ingoa me nga whakaahuatanga o nga taonga kua rahuitia i te Russian Federation. A ko nga tauira whatunga neural ka "tirotiro" nga whakaahua ki te kite mena kei roto nga URL, nga tuhinga mokowhiti, nga nama waea, me nga korero "kua rahuitia".

Mo nga keehi e ngana ana ratou ki te hoko i tetahi hua kua whakakorehia he mea ture, kaore he tuhinga kei roto i te taitara me te whakaahuatanga, ka whakamahia e matou te tohu tohu. Mo ia ahua, tae atu ki te 11 mano nga tohu ka taea te taapiri e whakaatu ana he aha kei roto i te ahua.

Me pehea ta matou whakahaere i nga panui
E ngana ana ratou ki te hoko i te hookah ma te huna he samovar.

Ka rite ki nga whiriwhiringa uaua, ka mahi ano nga mea ngawari, hei whakaoti rapanga kitea e pa ana ki te kuputuhi:

  • antimat;
  • URL me te tau waea;
  • te whakahua i nga karere inamata me etahi atu hoapaki;
  • utu iti;
  • nga panui kaore he mea hei hoko, etc.

I tenei ra, ka haere nga panui katoa i roto i te tatari pai neke atu i te 50 nga whiriwhiringa aunoa e ngana ana ki te rapu i tetahi mea kino i roto i te panui.

Mena kaore tetahi o nga kaitoro i mahi, ka tukuna he whakautu ki a Yula ko te panui "te nuinga pea" i roto i te raupapa tino pai. Ka whakamahia e matou tenei whakautu, a ko nga kaiwhakamahi kua ohauru ki te kaihoko ka whiwhi panui mo te waatea o tetahi hua hou.

Me pehea ta matou whakahaere i nga panui
He whakamohiotanga he hua hou ta te kaihoko.

Ko te mutunga, ko ia panui he "tipu" ki nga metadata, ko etahi o enei ka hangaia i te wa i hangaia ai te panui (te wahitau IP a te kaituhi, te kaihoko-kaiwhakamahi, te turanga, te geolocation, me etahi atu), ko te toenga ko te kaute i tukuna e ia tātari. .

Nga rarangi panui

Ka pa ana tetahi panui ki te papaahi, ka tukuna e te punaha ki tetahi o nga rarangi. Ka hangaia ia rarangi ma te whakamahi i te tauira pangarau e whakakotahi ana i nga metadata panui kia kitea nga tauira kino.

Hei tauira, ka taea e koe te hanga i tetahi rarangi panui i roto i te waahanga "Waea Waea" mai i nga kaiwhakamahi Yula e kiia ana mai i St.

Me pehea ta matou whakahaere i nga panui
He tauira o nga panui i tukuna e tetahi kaiwhakamahi ki nga taone rereke.

Ka taea ranei e koe te hanga i nga rarangi i runga i nga kaute ka tukuna e te whatunga neural ki nga panui, me te whakarite kia heke iho.

Ia tūtira, i runga i tana ake tikanga, ka tautapa he kaute whakamutunga ki te panui. Na ka taea e koe te haere i roto i nga huarahi rereke:

  • whakapūtāhia te paepae e whiwhi ai tētahi pānuitanga i tētahi momo aukati;
  • tukuna nga panui katoa i roto i te rarangi ki nga kaitakawaenga mo te arotake a-ringa;
  • whakakotahi ranei i nga whiringa o mua: tohua te paepae aukati aunoa ka tukuna atu ki nga kaitakawaenga nga panui kaore ano kia eke ki tenei paepae.

Me pehea ta matou whakahaere i nga panui

He aha i hiahiatia ai enei rarangi? Me kii na tetahi kaiwhakamahi i tuku he whakaahua o te pu. Ka tohua e te whatunga neural he kaute mai i te 95 ki te 100 ka whakatau me te 99 paiheneti te tika he patu kei te pikitia. Engari mena kei raro te uara kaute i te 95%, ka timata te heke o te tika o te tauira (he ahuatanga tenei o nga tauira whatunga neural).

Ko te mutunga mai, ka hangaia he rarangi i runga i te tauira kaute, a ko aua panui i tae mai i waenga i te 95 me te 100 ka aukati aunoatia hei "Hua Kua Rahuitia". Ko nga panui kei raro iho i te 95 ka tukuna ki nga kaiwhakariterite mo te tukatuka a-ringa.

Me pehea ta matou whakahaere i nga panui
Chocolate Beretta me nga kaata. Mo te whakaōrite ā-ringa anake! 🙂

Whakaōrite ā-ringa

I te timatanga o te tau 2019, tata ki te 94% o nga panui katoa i Yula ka whakaōrite aunoa.

Me pehea ta matou whakahaere i nga panui

Mena kaore e taea e te papaaho te whakatau i etahi panui, ka tukuna e ia mo te whakatikatika a-ringa. I whakawhanakehia e Odnoklassniki a raatau ake taputapu: ko nga mahi mo nga kaiwhakariterite ka whakaatu tonu i nga korero katoa e tika ana hei whakatau tere - he pai te panui, me aukati ranei, hei tohu i te take.

Na kia kore ai e mamae te kounga o te ratonga i te wa o te whakatikatika a-ringa, ka aro turukihia nga mahi a te tangata. Hei tauira, i roto i te roma mahi, ka whakaatuhia he "mahanga" ki te kaitakawaenga—he panui kua oti kee te hanga otinga. Ki te kore e rite te whakatau a te kaitakawaenga ki te mea kua oti, ka he te kaitakawaenga.

I te toharite, 10 hēkona te roa o te kaitakawaenga ki te tirotiro i tetahi panui. I tua atu, ko te maha o nga hapa kaore i neke atu i te 0,5% o nga panui kua whakamanahia.

Te whakaōrite o te tangata

Ko nga hoa mahi mai i Odnoklassniki i haere tonu me te whakamahi i te "awhina a te hunga whakarongo": i tuhia e ratou he tono keemu mo te whatunga hapori ka taea e koe te tohu tere i te nui o nga raraunga, me te whakaatu i etahi tohu kino - Odnoklassniki Moderator (https://ok.ru/app/moderator). He huarahi pai ki te whakamahi i te awhina a nga kaiwhakamahi OK e ngana ana kia pai ake nga korero.

Me pehea ta matou whakahaere i nga panui
He keemu e tohu ai nga kaiwhakamahi i nga whakaahua he nama waea kei runga.

Ko nga rarangi panui kei roto i te papaahi ka taea te tuku ki te keemu Odnoklassniki Moderator. Ko nga mea katoa e tohuhia ana e nga kaiwhakamahi keemu ka tukuna ki nga kaitakawaenga o roto mo te manatoko. Ma tenei kaupapa ka taea e koe te aukati i nga panui kaore ano kia hangahia nga whiriwhiringa, me te hanga tauira whakangungu i te wa kotahi.

Pupuri hua whakaōrite

Ka tiakina e matou nga whakatau katoa i mahia i te waa whakaōrite kia kore ai e tukatuka ano i aua panui kua oti i a matou te whakatau.

E hia miriona nga tautau ka hangaia ia ra i runga i nga panui. I te roanga o te wa, ka tapaina ia tautau he "pai" he "kino." Ko ia panui hou, tana whakahounga ranei, ka uru ki tetahi tautau me te tohu, ka whiwhi aunoa i te whakataunga mai i te tautau. Tata ki te 20 mano nga whakataunga aunoa mo ia ra.

Me pehea ta matou whakahaere i nga panui

Mena karekau he panui hou ka tae mai ki te kahui, ka tangohia mai i te mahara ka tuhia tana hash me te otinga ki a Apache Cassandra.

Ina whiwhi panui hou te papaahi, ka ngana ki te kimi i tetahi kahui rite i waenga i nga mea kua oti te hanga me te tango i tetahi otinga mai i a ia. Mena kaore he huinga penei, ka haere te papaahi ki a Cassandra ka titiro ki reira. I kitea e koe? He pai, ka tukuna te otinga ki te tautau ka tukuna ki a Yula. E 70 mano te toharite o enei whakatau "whakahoki" ia ra—8% o te katoa.

Hei whakariterite

E rua tau me te haurua matou e whakamahi ana i te papaaho whakaōrite Odnoklassniki. He pai ki a matou nga hua:

  • Ka whakaōrite aunoa mātou i te 94% o ngā pānuitanga katoa ia rā.
  • Ko te utu mo te whakatikatika i tetahi panui i whakahekehia mai i te 2 rubles ki te 7 kopecks.
  • He mihi ki te taputapu kua rite, kua wareware matou ki nga raruraru o te whakahaere i nga kaiwhakariterite.
  • I whakanuia e matou te maha o nga panui kua tukatukahia e te ringa ma te 2,5 nga wa me te rite tonu te maha o nga kaitakawaenga me te tahua. Kua piki ake te kounga o te whakaōrite ā-ringa nā te mana aunoa, ā, ka huri haere ki te 0,5% o ngā hapa.
  • Ka tere taatau ki te kapi i nga momo mokowhiti hou me nga whiriwhiringa.
  • Ka hono tere matou i nga tari hou ki te whakaōrite "Yula Poutū". Mai i te tau 2017, kua taapirihia e Yula nga Taonga Tuturu, Nga Waahanga me nga poutū Aunoa.

Source: will.com

Tāpiri i te kōrero