Ib tsab xov xwm los ntawm pab pawg Stitch Fix qhia txog kev siv cov kev sim uas tsis yog qhov tsis zoo hauv kev lag luam thiab cov khoom lag luam A / B xeem. Txoj hauv kev no siv tau tiag tiag thaum peb tab tom sim cov tshuaj tshiab uas muaj txiaj ntsig uas tsis ntsuas los ntawm kev ntsuas.
Qhov piv txwv yooj yim tshaj plaws yog kev txo nqi. Piv txwv li, peb automate tus txheej txheem ntawm kev muab thawj zaj lus qhia, tab sis peb tsis xav kom txo tau qhov kawg-rau-kawg hloov dua siab tshiab. Los yog peb sim cov kev hloov pauv uas yog tsom rau ib ntu ntawm cov neeg siv, thaum ua kom ntseeg tau tias kev hloov pauv rau lwm ntu tsis poob ntau (thaum sim ntau qhov kev xav, tsis txhob hnov qab txog cov kev hloov kho).
Xaiv qhov tseeb uas tsis yog qhov tsis muaj qhov tsis zoo yuav ntxiv cov kev cov nyom ntxiv thaum lub sij hawm tsim qauv. Cov lus nug ntawm yuav ua li cas xaiv Δ tsis zoo heev hauv kab lus. Nws zoo nkaus li qhov kev xaiv no tsis yog pob tshab nkaus hauv kev sim tshuaj. Cov ntaub ntawv kho mob ntawm cov ntawv tshaj tawm uas tsis yog qhov tsis zoo uas tsuas yog ib nrab ntawm cov ntawv tshaj tawm pom zoo rau kev xaiv ciam teb, thiab feem ntau cov kev txiav txim siab no tsis meej lossis tsis meej.
Txawm li cas los xij, txoj hauv kev no zoo li nthuav vim ... los ntawm kev txo qis tus qauv uas yuav tsum tau ua, nws tuaj yeem ua rau kom ceev ntawm kev sim, thiab, yog li ntawd, kev txiav txim siab ceev. — Daria Mukhina, tus kws tshuaj ntsuam xyuas khoom rau Skyeng mobile thov.
Pab Pawg Stitch Fix nyiam sim ntau yam sib txawv. Tag nrho cov thev naus laus zis hauv zej zog nyiam ua qhov kev xeem hauv txoj cai. Qhov twg version ntawm qhov chaw nyiam cov neeg siv ntau dua - A lossis B? Puas yog version A ntawm cov qauv kev pom zoo ua tau nyiaj ntau dua li version B? Txhawm rau ntsuas qhov kev xav, peb yuav luag ib txwm siv txoj hauv kev yooj yim tshaj plaws los ntawm cov chav kawm txheeb cais yooj yim:
Txawm hais tias peb tsis tshua siv lo lus, qhov kev sim no yog hu ua "kev ntsuam xyuas zoo tshaj plaws." Nrog rau txoj kev no, peb xav tias tsis muaj qhov sib txawv ntawm ob txoj kev xaiv. Peb lo nrog lub tswv yim no thiab tsuas yog tso tseg yog tias cov ntaub ntawv txaus siab ua li ntawd - uas yog, nws qhia tau tias ib qho ntawm cov kev xaiv (A lossis B) zoo dua li lwm qhov.
Kev ntsuam xyuas qhov kev xav zoo tshaj plaws yog tsim rau ntau yam teeb meem. Peb tsuas yog tso tawm version B ntawm tus qauv pom zoo yog tias nws pom tseeb zoo dua li version A uas twb tau siv lawm, tab sis qee zaum, txoj hauv kev no tsis ua haujlwm zoo. Cia peb saib ob peb yam piv txwv.
1) Peb siv cov kev pabcuam thib peb, uas pab txheeb xyuas daim npav rho nyiaj cuav. Peb pom lwm qhov kev pabcuam uas raug nqi tsawg dua. Yog tias qhov kev pabcuam pheej yig dua ua haujlwm zoo li qhov peb siv tam sim no, peb yuav xaiv nws. Nws tsis tas yuav zoo dua qhov kev pabcuam koj siv.
2) Peb xav tso tseg cov ntaub ntawv qhov chaw A thiab hloov nws nrog cov ntaub ntawv B. Peb tuaj yeem ncua sijhawm tso tseg A yog B ua rau cov txiaj ntsig tsis zoo, tab sis nws tsis tuaj yeem siv A txuas ntxiv.
3) Peb xav txav los ntawm txoj kev ua qauvA rau B txoj hauv kev tsis yog vim peb xav tau cov txiaj ntsig zoo dua los ntawm B, tab sis vim nws ua rau peb ua haujlwm tau yooj yim dua. Peb tsis muaj laj thawj ntseeg tias B yuav phem dua, tab sis peb yuav tsis hloov pauv yog tias qhov no tshwm sim.
4) Peb tau hloov ntau yam zoo mus rau hauv lub vev xaib tsim (version B) thiab ntseeg tias qhov version no zoo dua rau version A. Peb tsis xav tias yuav hloov pauv hloov lossis ib qho ntawm qhov tseem ceeb ntawm kev ua tau zoo uas peb feem ntau ntsuas lub vev xaib. Tab sis peb ntseeg tias muaj cov txiaj ntsig hauv qhov ntsuas tsis tau ntsuas lossis peb lub tshuab tsis txaus ntsuas.
Hauv txhua qhov xwm txheej no, kev tshawb fawb superiority tsis yog qhov kev daws teeb meem zoo tshaj plaws. Tab sis feem ntau cov kws tshaj lij hauv cov xwm txheej zoo li no siv nws los ntawm lub neej ntawd. Peb ua tib zoo ua qhov kev sim kom raug txiav txim siab qhov loj ntawm cov nyhuv. Yog tias nws muaj tseeb tias version A thiab B ua haujlwm zoo sib xws, muaj lub sijhawm uas peb yuav tsis lees paub qhov kev xav tsis tseeb. Peb puas xaus lus tias A thiab B ua tau zoo ib yam? Tsis muaj! Kev tsis lees paub qhov kev xav tsis zoo thiab kev lees paub ntawm null hypothesis tsis yog tib yam.
Piv txwv qhov loj me (uas, ntawm chav kawm, koj tau ua) feem ntau ua tiav nrog kev txwv nruj dua rau Hom I yuam kev (qhov tshwm sim ntawm kev tsis lees paub qhov kev xav tsis zoo, feem ntau hu ua alpha) dua li rau Hom II yuam kev (qhov tshwm sim ntawm kev tsis lees paub. qhov null hypothesis, muab cov xwm txheej uas qhov kev xav tsis tseeb yog cuav, feem ntau hu ua beta). Tus nqi raug rau alpha yog 0,05, thaum tus nqi raug rau beta yog 0,20, sib raug rau lub zog txheeb cais ntawm 0,80. Qhov no txhais tau hais tias muaj 20% txoj hauv kev uas peb yuav tsis pom qhov tseeb ntawm qhov peb tau teev tseg hauv peb cov kev suav fais fab, thiab qhov ntawd yog qhov sib txawv loj heev hauv cov ntaub ntawv. Ua piv txwv, cia peb xav txog cov kev xav hauv qab no:
H0: Kuv lub hnab ev ntawv tsis nyob hauv kuv chav (3)
H1: Kuv lub hnab ev ntawv nyob hauv kuv chav (4)
Yog tias kuv tshawb nrhiav kuv chav thiab pom kuv lub hnab ev ntawv, zoo heev, kuv tuaj yeem tsis lees paub qhov kev xav tsis tseeb. Tab sis yog tias kuv ntsia ib ncig ntawm chav tsev thiab nrhiav tsis tau kuv lub hnab ev ntawv (Daim duab 1), kuv yuav tsum kos li cas? Kuv puas paub tseeb tias nws tsis nyob ntawd? Puas yog kuv saib nyuaj txaus? Yuav ua li cas yog tias kuv tsuas tshawb 80% ntawm chav tsev? Xaus tias lub hnab ev ntawv yog twv yuav raug hu tsis nyob hauv chav yuav yog qhov kev txiav txim siab ua pob. Tsis xav tsis thoob tias peb tsis tuaj yeem "tau txais qhov kev xav tsis zoo."
Lub cheeb tsam peb tshawb nrhiav
Peb tsis pom lub hnab ev ntawv - peb yuav tsum lees txais qhov kev xav tsis zoo?
Daim duab 1: Tshawb nrhiav 80% ntawm chav tsev yog kwv yees tib yam li kev tshawb nrhiav ntawm 80% lub zog. Yog tias koj tsis pom lub hnab ev ntawv tom qab saib 80% ntawm chav tsev, koj puas tuaj yeem txiav txim siab tias nws tsis nyob ntawd?
Yog li cas tus kws tshawb fawb cov ntaub ntawv yuav tsum ua li cas hauv qhov xwm txheej no? Koj tuaj yeem ua kom lub zog ntawm txoj kev tshawb no zoo heev, tab sis tom qab ntawd koj yuav xav tau cov qauv loj dua thiab cov txiaj ntsig tseem yuav tsis txaus siab.
Hmoov zoo, cov teeb meem zoo li no tau kawm ntev hauv ntiaj teb kev tshawb fawb soj ntsuam. Tshuaj B yog pheej yig dua li tshuaj A; Tshuaj B yuav tsum ua rau muaj kev phiv tsawg dua li Tshuaj A; tshuaj B yog yooj yim rau kev thauj mus los vim nws tsis tas yuav tsum tau txias, tab sis tshuaj A ua. Cia peb sim lub hypothesis ntawm tsis-inferiority. Qhov no yog qhia tau hais tias version B yog zoo li version A-tsawg kawg nyob rau hauv ib co predefined noninferiority margin, Δ. Peb mam li tham ntxiv txog yuav ua li cas los teeb tsa qhov kev txwv no me ntsis tom qab. Tab sis tam sim no cia peb xav tias qhov no yog qhov sib txawv me tshaj plaws uas muaj txiaj ntsig zoo (hauv cov ntsiab lus ntawm kev sim tshuaj, qhov no feem ntau hu ua qhov tseem ceeb hauv kev kho mob).
Non-inferiority hypotheses tig txhua yam ntawm nws lub taub hau:
Tam sim no, es tsis txhob xav tias tsis muaj qhov sib txawv, peb yuav xav tias version B yog qhov phem dua li version A, thiab peb yuav ua raws li qhov kev xav no kom txog thaum peb pom tias qhov no tsis yog qhov teeb meem. Qhov no yog lub sijhawm tiag tiag thaum nws ua rau kev nkag siab siv qhov kev ntsuas ib sab! Hauv kev xyaum, qhov no tuaj yeem ua tiav los ntawm kev tsim lub sijhawm kev ntseeg siab thiab txiav txim siab seb lub sijhawm twg yog qhov tseeb ntau dua Δ (Daim duab 2).
Xaiv Δ
Yuav ua li cas xaiv txoj cai Δ? Cov txheej txheem Δ xaiv suav nrog kev txheeb xyuas qhov tseeb thiab kev ntsuas qhov tseem ceeb. Hauv lub ntiaj teb ntawm kev tshawb fawb soj ntsuam, muaj cov txheej txheem tswj hwm uas txiav txim siab tias delta yuav tsum sawv cev rau qhov sib txawv ntawm qhov chaw kho mob me tshaj plaws-ib qho uas yuav ua rau muaj qhov sib txawv hauv kev xyaum. Nov yog cov lus hais los ntawm European cov lus qhia los sim koj tus kheej nrog: "Yog tias qhov sib txawv tau raug xaiv raug, lub sijhawm kev ntseeg siab uas nyob nruab nrab ntawm -∆ thiab 0… tseem txaus los ua kom pom qhov tsis muaj qhov tsis zoo. Yog tias qhov txiaj ntsig no tsis pom zoo, nws txhais tau tias ∆ tsis raug xaiv kom tsim nyog. "
Lub delta yuav tsum tsis txhob tshaj qhov loj ntawm version A txheeb ze rau qhov tseeb tswj (placebo / tsis muaj kev kho mob), vim qhov no ua rau peb hais tias version B yog phem tshaj qhov tseeb tswj, thaum tib lub sij hawm qhia "tsis-inferiority. ” Cia peb xav tias thaum version A tau tshaj tawm, nws tau hloov los ntawm version 0 lossis qhov tshwj xeeb tsis muaj nyob txhua qhov (saib daim duab 3).
Raws li cov txiaj ntsig ntawm kev sim qhov kev xav zoo tshaj plaws, qhov tshwm sim loj E tau tshwm sim (uas yog, suav tias yog μ^A−μ^0 = E). Tam sim no A yog peb tus qauv tshiab, thiab peb xav kom paub tseeb tias B zoo li A. Lwm txoj hauv kev los sau μB−μA≤−Δ (null hypothesis) yog μB≤μA−Δ. Yog tias peb xav tias ua tau sib npaug lossis ntau dua E, ces μB ≤ μA−E ≤ placebo. Tam sim no peb pom tias peb qhov kwv yees rau μB tag nrho tshaj μA-E, uas yog li ntawd tsis lees paub qhov kev xav tsis zoo thiab tso cai rau peb los txiav txim siab tias B zoo li A, tab sis tib lub sijhawm μB yuav yog ≤ μ placebo, uas tsis yog qhov cas peb xav tau. (Daim duab 3).
Daim duab 3. Ua qauv qhia txog kev pheej hmoo ntawm kev xaiv qhov tsis muaj qhov tsis zoo. Yog tias qhov kev txiav tawm siab dhau lawm, nws tuaj yeem txiav txim siab tias B yog qhov tsis zoo rau A, tab sis tib lub sijhawm tsis paub qhov txawv ntawm cov placebo. Peb yuav tsis pauv cov tshuaj uas muaj txiaj ntsig zoo dua li cov placebo (A) rau cov tshuaj uas muaj txiaj ntsig zoo li placebo.
Kev xaiv ntawm α
Cia wb mus xaiv α. Koj tuaj yeem siv tus qauv tus nqi α = 0,05, tab sis qhov no tsis ncaj ncees kiag li. Zoo li, piv txwv li, thaum koj yuav ib yam dab tsi hauv online thiab siv ob peb tus lej luv nqi ib zaug, txawm hais tias lawv yuav tsum tsis txhob muab tso ua ke - tus tsim tawm tsuas yog ua yuam kev, thiab koj tau mus nrog nws. Raws li txoj cai, tus nqi ntawm α yuav tsum sib npaug rau ib nrab ntawm tus nqi ntawm α uas yog siv thaum kuaj lub superiority hypothesis, uas yog, 0,05 / 2 = 0,025.
Qauv loj
Yuav ua li cas kwv yees qhov loj me? Yog tias koj ntseeg tias qhov tseeb qhov txawv nruab nrab ntawm A thiab B yog 0, ces qhov piv txwv loj suav yog tib yam li thaum kuaj qhov kev xav zoo tshaj plaws, tshwj tsis yog tias koj hloov qhov loj me nrog qhov tsis muaj qhov tsis zoo, yog tias koj siv. α tsis-inferior efficiency = 1/2αsuperiority (αnon-inferiority = 1/2αsuperiority). Yog tias koj muaj laj thawj ntseeg tias kev xaiv B yuav ua rau me ntsis phem dua li kev xaiv A, tab sis koj xav ua pov thawj tias nws tsis zoo dua li Δ, ces koj muaj hmoo! Qhov no ua rau txo koj cov qauv me me vim tias nws yooj yim dua los qhia tias B yog qhov phem dua li A yog tias koj xav tias nws yog me ntsis phem dua li qhov sib npaug.
Piv txwv nrog kev daws
Cia peb hais tias koj xav hloov kho mus rau version B, yog tias nws tsis ntau tshaj 0,1 taw tes phem dua li version A ntawm 5-point cov neeg siv khoom txaus siab ... Cia peb los ua qhov teeb meem no siv cov kev xav zoo tshaj.
Txhawm rau ntsuas qhov kev xav zoo tshaj plaws, peb yuav suav cov qauv loj raws li hauv qab no:
Ntawd yog, yog tias koj muaj 2103 kev soj ntsuam hauv koj pab pawg, koj tuaj yeem ntseeg 90% tias koj yuav pom qhov cuam tshuam loj ntawm 0,10 lossis loj dua. Tab sis yog tias 0,10 siab dhau rau koj, nws yuav tsis tsim nyog sim qhov kev xav zoo tshaj rau. Txhawm rau kom muaj kev nyab xeeb, koj tuaj yeem txiav txim siab khiav txoj kev kawm rau qhov me me, xws li 0,05. Hauv qhov no, koj yuav xav tau 8407 kev soj ntsuam, uas yog, tus qauv yuav nce yuav luag 4 zaug. Tab sis yuav ua li cas yog tias peb daig rau peb tus qauv qub, tab sis nce lub zog rau 0,99 kom peb thiaj li muaj kev nyab xeeb yog tias peb tau txais txiaj ntsig zoo? Nyob rau hauv rooj plaub no, n rau ib pab pawg yuav yog 3676, uas yog twb zoo dua, tab sis nce tus qauv loj los ntawm ntau tshaj 50%. Thiab yog li ntawd, peb tseem tsuas yuav tsis tuaj yeem lees paub qhov kev xav tsis zoo, thiab peb yuav tsis tau txais cov lus teb rau peb cov lus nug.
Yuav ua li cas yog tias peb sim qhov kev xav tsis zoo ntawm qhov tsis zoo?
Cov qauv loj yuav raug suav nrog cov qauv tib yam tshwj tsis yog rau tus lej.
Qhov sib txawv ntawm cov qauv siv los ntsuas qhov kev xav zoo tshaj plaws yog raws li hauv qab no:
- Z1−α/2 hloov los ntawm Z1−α, tab sis yog tias koj ua txhua yam raws li txoj cai, koj hloov α = 0,05 nrog α = 0,025, uas yog, nws yog tib tus lej (1,96)
- (μB-μA) tshwm hauv tus lej
- θ (qhov loj me) yog hloov los ntawm Δ (nplooj ntawm qhov tsis zoo)
Yog tias peb xav tias µB = µA, ces (µB − µA) = 0 thiab qhov piv txwv loj xam rau qhov tsis muaj feem cuam tshuam yog qhov peb yuav tau txais yog tias peb suav qhov superiority rau qhov loj me ntawm 0,1, zoo heev! Peb tuaj yeem ua ib qho kev kawm ntawm tib qhov loj nrog cov kev xav sib txawv thiab kev sib txawv rau cov lus xaus, thiab peb yuav tau txais cov lus teb rau cov lus nug uas peb xav teb tiag tiag.
Tam sim no xav tias peb tsis xav tias µB = µA thiab
Peb xav tias µB yog me ntsis zuj zus, tej zaum los ntawm 0,01 units. Qhov no ua rau peb tus denominator, txo tus qauv loj ntawm ib pawg mus rau 1737.
Yuav ua li cas yog tias version B yog tiag tiag zoo dua version A? Peb tsis lees txais qhov kev xav tsis zoo uas B yog qhov phem tshaj A los ntawm ntau tshaj Δ thiab lees txais lwm qhov kev xav tias B, yog tias phem dua, tsis muaj qhov phem dua li A los ntawm Δ thiab yuav zoo dua. Sim muab cov lus xaus no rau hauv qhov kev nthuav qhia hla kev ua haujlwm thiab pom tias muaj dab tsi tshwm sim (qhov tseeb, sim nws). Hauv qhov xwm txheej yav tom ntej, tsis muaj leej twg xav hais tias "tsis muaj ntau dua Δ phem dua thiab tej zaum zoo dua."
Hauv qhov no, peb tuaj yeem ua qhov kev tshawb fawb, uas yog hu ua luv luv "sim cov kev xav tias ib qho ntawm cov kev xaiv zoo dua lossis qis dua rau lwm qhov." Nws siv ob txheej hypotheses:
Thawj txheej (tib yam li kev sim qhov tsis yog qhov kev xav tsis zoo):
Qhov thib ob txheej (tib yam li thaum ntsuas qhov kev xav zoo tshaj plaws):
Peb sim qhov kev xav thib ob tsuas yog tias thawj qhov tsis lees paub. Thaum kuaj ua ntu zus, peb tuav tag nrho Hom I yuam kev tus nqi (α). Hauv kev xyaum, qhov no tuaj yeem ua tiav los ntawm kev tsim lub sijhawm 95% kev ntseeg siab rau qhov sib txawv ntawm qhov txhais tau tias thiab kev sim los txiav txim siab seb lub sijhawm tag nrho yog ntau dua -Δ. Yog hais tias lub ncua sij hawm tsis tshaj -Δ, peb tsis tuaj yeem tsis lees paub tus nqi null thiab nres. Yog tias tag nrho lub caij nyoog yog qhov loj dua −Δ, peb yuav txuas ntxiv thiab saib seb lub caij nyoog muaj 0.
Muaj lwm hom kev tshawb fawb uas peb tsis tau tham txog - kev tshawb fawb sib npaug.
Cov hom kev tshawb fawb no tuaj yeem hloov tau los ntawm kev tshawb fawb tsis muaj kev cuam tshuam thiab rov ua dua, tab sis lawv yeej muaj qhov sib txawv tseem ceeb. Ib qho kev sim tsis muaj kev cuam tshuam los qhia tias kev xaiv B yog qhov tsawg kawg yog qhov zoo li A. Ib qho kev sib npaug sib npaug los qhia tias kev xaiv B yog yam tsawg kawg nkaus li A. Kev xaiv A yog qhov zoo li B, uas nyuaj dua. Qhov tseem ceeb, peb tab tom sim txiav txim siab seb puas muaj kev ntseeg siab tag nrho rau qhov sib txawv ntawm txhais tau tias nyob ntawm −Δ thiab Δ. Cov kev tshawb fawb zoo li no yuav tsum muaj tus qauv loj dua thiab tau ua tsawg dua. Yog li lub sij hawm tom ntej koj ua txoj kev kawm uas koj lub hom phiaj tseem ceeb yog los xyuas kom meej tias qhov tshiab version tsis yog phem dua, tsis txhob hais rau "tsis lees paub qhov kev xav tsis zoo." Yog tias koj xav sim qhov kev xav tseem ceeb tiag tiag, xav txog cov kev xaiv sib txawv.
Tau qhov twg los: www.hab.com