Thiab nyob ntawm qhov tshwm sim, peb tso cai lossis tsis tso cai rau koj tso qhov kev txiav txim, tab sis peb ceeb toom koj tias qhov ceev ntawm lub tsheb nyob rau hauv lub sijhawm no yog tsawg.
Hauv daim ntawv thov nws zoo li no:
Kev siv tus qauv tso cai rau koj los tsim cov kev txiav txim tshiab kom raug thiab tsis ua rau tib neeg tsis muaj nuj nqis. Ntawd yog, txhawm rau tswj qhov sib piv ntawm kev ntseeg tau thiab tus naj npawb ntawm kev txiav txim yam tsis muaj cov tshuab siv cov qauv precision-recall. Kev ntseeg siab ntawm cov kev pabcuam cuam tshuam rau kev xav mus txuas ntxiv siv cov khoom, piv txwv li thaum kawg nws tag nrho los ntawm tus naj npawb ntawm kev mus ncig.
Ib me ntsis txog precision-recallIb qho ntawm cov haujlwm tseem ceeb hauv kev kawm tshuab yog kev faib cov haujlwm: muab cov khoom rau ib qho ntawm ob chav kawm. Nyob rau hauv cov ntaub ntawv no, qhov tshwm sim ntawm lub tshuab kev kawm algorithm feem ntau dhau los ua tus lej ntsuas ntawm kev ua tswv cuab hauv ib qho ntawm cov chav kawm, piv txwv li, kev ntsuas qhov tshwm sim. Txawm li cas los xij, cov kev ua uas tau ua feem ntau yog binary: yog tias lub tsheb muaj, ces peb yuav cia koj xaj nws, thiab yog tias tsis yog, peb yuav tsis. Kom paub meej, cia peb hu ib qho algorithm uas ua rau tus lej kwv yees tus qauv, thiab tus faib cov cai uas muab nws rau ib qho ntawm ob chav kawm (1 lossis -1). Txhawm rau ua kom muaj kev faib tawm raws li kev ntsuas tus qauv, koj yuav tsum xaiv qhov kev ntsuas ntsuas. Yuav ua li cas raws nraim nyob ntawm txoj hauj lwm.
Piv txwv tias peb tab tom ua ib qho kev xeem (classifier) ββrau qee yam kab mob tsawg thiab txaus ntshai. Raws li cov txiaj ntsig kev xeem, peb xa tus neeg mob mus kuaj kom ntxaws ntxiv, lossis hais tias: "Zoo, mus tsev." Rau peb, kev xa tus neeg mob mus tsev yog qhov phem tshaj qhov tsis xav kuaj tus neeg mob. Qhov ntawd yog, peb xav kom qhov kev sim ua haujlwm rau ntau tus neeg mob tiag tiag li sai tau. Tus nqi no hu ua recall =. Ib qho zoo tagnrho classifier muaj kev rov qab los ntawm 100%. Qhov xwm txheej degenerate yog xa txhua tus mus kuaj, tom qab ntawd qhov rov qab los kuj yuav yog 100%.
Nws kuj tshwm sim rau lwm txoj hauv kev. Piv txwv li, peb tab tom ua ib qho kev xeem rau cov tub ntxhais kawm, thiab nws muaj lub tshuab kuaj xyuas kev dag. Yog tias mam li nco dheev daim tshev tsis ua haujlwm rau qee kis ntawm kev dag, ces qhov no tsis txaus siab, tab sis tsis tseem ceeb. Ntawm qhov tod tes, nws yog qhov phem heev rau qhov tsis ncaj ncees rau cov tub ntxhais kawm ntawm tej yam lawv tsis ua. Ntawd yog, nws yog ib qho tseem ceeb rau peb tias ntawm cov lus teb zoo ntawm cov neeg faib khoom muaj ntau qhov tseeb raws li qhov ua tau, tej zaum ua rau muaj kev puas tsuaj ntawm lawv tus lej. Qhov no txhais tau hais tias koj yuav tsum tau maximize precision = . Yog tias qhov tshwm sim tshwm sim ntawm txhua yam khoom, ces qhov tseeb yuav sib npaug rau qhov zaus ntawm cov chav kawm uas tau teev tseg hauv cov qauv.
Yog hais tias lub algorithm tsim ib tug lej probability tus nqi, ces los ntawm kev xaiv txawv qhov pib, koj muaj peev xwm ua tau txawv precision-recall qhov tseem ceeb.
Hauv peb qhov teeb meem qhov xwm txheej yog raws li hauv qab no. Rov qab yog tus naj npawb ntawm cov xaj peb tuaj yeem muab, precision yog qhov kev ntseeg tau ntawm cov xaj no. Nov yog qhov precision-recall nkhaus ntawm peb cov qauv zoo li:
Muaj ob qhov xwm txheej hnyav: tsis pub leej twg xaj thiab tso cai rau txhua tus xaj. Yog tias koj tsis tso cai rau leej twg, ces nco qab yuav yog 0: peb tsis tsim kev txiav txim, tab sis tsis muaj leej twg yuav poob. Yog tias peb tso cai rau txhua tus, tom qab ntawd rov qab yuav yog 100% (peb yuav tau txais txhua qhov kev txiav txim tau), thiab qhov tseeb yuav yog 29%, piv txwv li 71% ntawm kev txiav txim yuav phem.
Ib qho piv txwv ntawm "Unlucky" yog tias muaj ntau qhov kev thov hauv nruab nrab hnub Friday yav tsaus ntuj. Muaj ntau qhov kev txiav txim, ntau tus neeg txaus siab, thiab tsis muaj neeg tsav tsheb txaus rau txhua tus. Nws yuav tig tawm zoo li no: tsis muaj cov tsav tsheb tsim nyog hauv tus pin. Tab sis cia li nyob rau hauv vib nas this lawv tshwm sim, vim hais tias nyob rau hauv lub sij hawm no muaj ntau tus neeg tsav tsheb nyob rau hauv qhov chaw no thiab lawv cov xwm txheej yog hloov tas li.
Yog li ntawd, ntau yam kev ntsuas qhov system nyob ib puag ncig ntawm point A tau dhau los ua cov yam ntxwv zoo:
Tag nrho cov tsheb.
Tus naj npawb ntawm lub tsheb ntawm kev txiav txim.
Tus naj npawb ntawm cov tsheb tsis muaj rau kev txiav txim hauv "Busy" xwm txheej.
Tus naj npawb ntawm cov neeg siv.
Tom qab tag nrho, ntau lub tsheb nyob ib puag ncig, qhov ntau dua nws yog tias ib qho ntawm lawv yuav dhau los ua.
Qhov tseeb, nws yog ib qho tseem ceeb rau peb tias tsis yog tsuas yog tsheb nyob, tab sis kuj ua tiav kev mus ncig ua si. Yog li ntawd, nws muaj peev xwm kwv yees qhov tshwm sim ntawm kev mus ncig ua si. Tab sis peb txiav txim siab tsis ua qhov no, vim hais tias tus nqi no zoo heev nyob ntawm tus neeg siv thiab tus neeg tsav tsheb.
Cov qauv kev cob qhia algorithm yog CatBoost. Cov ntaub ntawv tau los ntawm kev sim tau siv rau kev cob qhia. Tom qab kev siv, kev cob qhia cov ntaub ntawv yuav tsum tau sau, qee zaum tso cai rau qee tus neeg siv los txiav txim tawm tsam tus qauv kev txiav txim siab.
Cov txiaj ntsim tau los
Cov txiaj ntsig ntawm kev sim ua tau raws li qhov xav tau: kev siv tus qauv tso cai rau koj kom nce tus naj npawb ntawm kev ua tiav zoo vim kev txiav txim tsis muaj tsheb, tab sis tsis muaj kev cuam tshuam kev ntseeg siab.
Tam sim no, cov txheej txheem tau tsim tawm hauv txhua lub nroog thiab lub tebchaws thiab nrog nws cov kev pab, kwv yees li 1% ntawm kev mus ncig ua si tau zoo. Ntxiv mus, hauv qee lub nroog uas muaj tsheb tsawg, qhov sib koom ntawm cov kev mus ncig no nce mus txog 15%.