Ny lahatsoratra iray avy amin'ny ekipa Stitch Fix dia manoro hevitra amin'ny fampiasana ny fomba fitsapana tsy misy ambany kokoa amin'ny varotra sy ny vokatra A/B fitsapana. Tena mihatra io fomba fiasa io rehefa manandrana vahaolana vaovao izay manana tombony tsy refesina amin'ny fitsapana.
Ny ohatra tsotra indrindra dia ny fampihenana ny vidiny. Ohatra, ataontsika ho azy ny fizotran'ny fanomezana ny lesona voalohany, saingy tsy tiantsika ny hampihena be ny fiovam-po amin'ny farany. Na mizaha fiovana izay mikendry ny ampahany amin'ny mpampiasa iray izahay, ary manao izay hahazoana antoka fa tsy mihena be ny fiovam-po ho an'ny fizarana hafa (rehefa manandrana vinavina maromaro dia aza adino ny fanitsiana).
Manampy fanamby fanampiny mandritra ny dingan'ny famolavolana andrana ny fisafidianana ny sisiny tsy misy ambany. Ny fanontaniana ny fomba hifidianana Δ dia tsy voaresaka tsara ao amin'ny lahatsoratra. Toa tsy mangarahara tanteraka amin'ny fitsapana klinika ihany koa io safidy io. Ny boky ara-pitsaboana momba ny tsy ambany dia mitatitra fa ny antsasaky ny boky ihany no manamarina ny safidin'ny sisintany, ary matetika ireo fanamarinana ireo dia tsy mazava na tsy misy antsipiriany.
Na izany na tsy izany, toa mahaliana ity fomba fiasa ity satria... amin'ny fampihenana ny haben'ny santionany ilaina, dia afaka mampitombo ny hafainganam-pandehan'ny fitsapana, ary, noho izany, ny hafainganan'ny fanapahan-kevitra. - Daria Mukhina, mpandinika ny vokatra ho an'ny fampiharana finday Skyeng.
Ny ekipa Stitch Fix dia tia manandrana zavatra samihafa. Ny vondrom-piarahamonina teknolojia manontolo dia tia manao fitsapana amin'ny fitsipika. Iza amin'ny tranonkala no mahasarika mpampiasa maro kokoa - A sa B? Mahazo vola bebe kokoa noho ny kinova B ve ny dikan-teny A amin'ny modely fanolorana? Mba hanandramana vinavina dia saika mampiasa fomba tsotra indrindra avy amin'ny taranja statistika fototra izahay:
Na dia mahalana aza isika no mampiasa ilay teny, ity karazana fitsapana ity dia antsoina hoe "fitsapana hypothesis ambony." Amin'ity fomba fiasa ity dia heverintsika fa tsy misy fahasamihafana eo amin'ireo safidy roa ireo. Mifikitra amin'io hevitra io izahay ary mandao izany raha toa ka maharesy lahatra ny angon-drakitra hanaovana izany - izany hoe, mampiseho fa ny iray amin'ireo safidy (A na B) dia tsara kokoa noho ny iray hafa.
Ny fitsapana ny petra-kevitra ambony dia mety amin'ny olana isan-karazany. Ny kinova B amin'ny maodely fanolorana ihany no avoakanay raha toa ka tsara kokoa noho ny kinova A efa ampiasaina izy io. Saingy amin'ny tranga sasany dia tsy mandeha tsara io fomba fiasa io. Andeha isika hijery ohatra vitsivitsy.
1) Mampiasa serivisy antoko fahatelo izahay, izay manampy amin'ny famantarana ny karatra banky sandoka. Nahita tolotra hafa iray izay tsy dia lafo loatra izahay. Raha misy serivisy mora kokoa miasa toy ny serivisy ampiasainay amin'izao fotoana izao dia hifidy azy izahay. Tsy voatery ho tsara kokoa noho ny serivisy ampiasainao izany.
2) Te hiala amin'ny loharano angona izahay A ary soloy amin'ny loharanom-baovao B. Mety hanemotra ny fandaozana an'i A isika raha miteraka vokatra ratsy be i B, saingy tsy azo atao ny manohy mampiasa A.
3) Te hifindra amin'ny fomba modely izahayNy fomba fiasan'ny A hatramin'ny B dia tsy hoe satria manantena vokatra tsara kokoa avy amin'i B isika, fa satria manome fahafaham-po bebe kokoa ho antsika izany. Tsy misy antony hinoanay fa hiharatsy kokoa ny B, fa tsy hanao ny tetezamita izahay raha izao no zava-misy.
4) Nanao fanovana kalitao maromaro izahay ao amin'ny famolavolana tranonkala (dikan-teny B) ary mino fa ity dikan-teny ity dia ambony noho ny kinova A. Tsy manantena fiovana amin'ny fiovam-po izahay na ny iray amin'ireo tondro fampandehanana fototra izay matetika hanombanana ny tranokala. Saingy mino izahay fa misy tombony amin'ny mari-pamantarana izay tsy azo refesina na tsy ampy handrefesana ny teknolojianay.
Amin'ireo tranga rehetra ireo, ny fikarohana ambony dia tsy vahaolana mety indrindra. Saingy ny ankamaroan'ny manam-pahaizana manokana amin'ny toe-javatra toy izany dia mampiasa azy io amin'ny alàlan'ny default. Manatanteraka tsara ny andrana izahay mba hamaritana tsara ny haben'ny vokatra. Raha toa ka marina fa ny dikan-teny A sy B dia miasa amin'ny fomba mitovy, dia misy ny mety tsy handà ny petra-kevitra tsy misy dikany. Manatsoaka hevitra ve isika fa ny A sy B dia mitovy amin'ny ankapobeny? Tsia! Ny tsy fandavana ny vinavina tsy misy sy ny fanekena ny vinavina tsy misy dia tsy mitovy.
Ny kajikajy habe santionany (izay, mazava ho azy, efa nataonao) dia matetika atao amin'ny fetra henjana kokoa ho an'ny fahadisoana Type I (ny mety tsy handà ny vinavina tsy misy dikany, matetika antsoina hoe alpha) noho ny fahadisoana Type II (ny mety ho tsy fandavana. ny vinavina tsy misy dikany, nomena fepetra fa diso ny vinavina tsy misy, matetika antsoina hoe beta). Ny sanda mahazatra ho an'ny alpha dia 0,05, raha ny sanda mahazatra ho an'ny beta dia 0,20, mifanaraka amin'ny herin'ny statistika 0,80. Midika izany fa misy 20% ny mety tsy hahavery ny tena fiantraikan'ny habe nofaritanay amin'ny kajy herinay, ary izany dia elanelana lehibe eo amin'ny fampahalalana. Ho ohatra, andeha hodinihintsika ireto petra-kevitra manaraka ireto:
H0: TSY ao amin'ny efitranoko ny kitapoko (3)
H1: ao amin'ny efitranoko ny kitapoko (4)
Raha nikaroka ny efitranoko aho ary nahita ny kitapoko, tsara, afaka mandà ny hevitra tsy misy dikany aho. Fa raha nijery manodidina ny efitrano aho ka tsy nahita ny kitapoko (sary 1), inona no fanatsoahan-kevitra tokony horaisiko? Azoko antoka fa tsy ao izany? Nijery mafy ve aho? Ahoana raha ny 80%-n'ny efitrano ihany no nokasaiko? Ny fanatsoahan-kevitra fa ny kitapo dia tena tsy ao amin'ny efitrano dia fanapahan-kevitra maimaika. Tsy mahagaga raha tsy afaka "manaiky ny hypothesis tsy misy dikany" isika.
Ny faritra notadiavinay
Tsy nahita ny kitapo - tokony hanaiky ny vinavina tsy misy dikany ve?
Sary 1: Ny fitadiavana ny 80% amin'ny efitrano iray dia mitovy amin'ny fitadiavana amin'ny hery 80%. Raha tsy hitanao ny kitapo rehefa avy nijery ny 80% ny efitrano, azonao atao ve ny manatsoaka hevitra fa tsy ao izany?
Inona àry no tokony hataon'ny mpahay siansa momba ny data amin'ity toe-javatra ity? Azonao atao ny mampitombo be ny herin'ny fandalinana, saingy mila habe santionany lehibe kokoa ianao ary mbola tsy mahafa-po ny vokatra.
Soa ihany fa ny olana toy izany dia efa nodinihina ela teo amin'ny tontolon'ny fikarohana klinika. Ny fanafody B dia mora kokoa noho ny fanafody A; Ny zava-mahadomelina B dia heverina fa miteraka voka-dratsy kely kokoa noho ny zava-mahadomelina A; Ny fanafody B dia mora entina satria tsy mila ampidirina anaty vata fampangatsiahana fa ny fanafody A. Andeha hojerentsika ny petra-kevitra momba ny tsy ambany. Izany dia mba hampisehoana fa ny dikan-B dia tsara toy ny dikan-teny A-farafaharatsiny ao anatin'ny sisiny tsy ambany, Δ. Hiresaka bebe kokoa momba ny fomba fametrahana io fetra io isika aoriana kely. Fa amin'izao fotoana izao dia andeha hojerentsika fa io no fahasamihafana kely indrindra izay misy dikany (ao anatin'ny sehatry ny fitsapana klinika dia matetika antsoina hoe dikany ara-pitsaboana izany).
Ny petra-kevitra tsy misy ambany dia mamadika ny zava-drehetra amin'ny lohany:
Ankehitriny, raha tokony hihevitra isika fa tsy misy fahasamihafana, dia hihevitra isika fa ny version B dia ratsy kokoa noho ny version A, ary hifikitra amin'io fiheverana io isika mandra-panehoantsika fa tsy izany no izy. Izany indrindra no fotoana maha-zava-dehibe ny fampiasana ny fitsapana hypothesis amin'ny lafiny iray! Amin'ny fampiharana, izany dia azo atao amin'ny fananganana elanelana fahatokisana ary hamaritana raha tena lehibe noho ny Δ ny elanelana (sary 2).
Mifidiana Δ
Ahoana no mifidy ny tsara Δ? Ny fizotry ny fifantenana Δ dia ahitana fanamarinana statistika sy fanombanana manan-danja. Ao amin'ny tontolon'ny fikarohana klinika, misy torolàlana mifehy izay milaza fa ny delta dia tokony haneho ny fahasamihafana kely indrindra eo amin'ny sehatry ny klinika-izay hitondra fiovana eo amin'ny fampiharana. Ity misy teny avy amin'ny torolalana Eoropeana hitsapana ny tenanao: “Raha voafantina tsara ny fahasamihafana, dia mbola ampy ny elanelan'ny fahatokisana eo anelanelan'ny –∆ sy 0… mba hampisehoana ny tsy fahambanian-tsaina. Raha toa ka tsy azo ekena io vokatra io, dia midika izany fa tsy voafantina araka ny tokony ho izy ny ∆.”
Ny delta dia tsy tokony hihoatra ny haben'ny fiantraikan'ny version A raha oharina amin'ny fanaraha-maso marina (plasebo / tsy misy fitsaboana), satria izany no mahatonga antsika hilaza fa ny version B dia ratsy kokoa noho ny fanaraha-maso marina, ary amin'ny fotoana iray dia mampiseho ny "tsy ambany". .” Andeha hatao hoe rehefa nampidirina ny version A dia nosoloina version 0 izy io na tsy nisy mihitsy ilay endri-javatra (jereo ny sary 3).
Miorina amin'ny valin'ny fitsapana ny petra-kevitra ambony, dia nambara ny haben'ny vokatra E (izany hoe, azo inoana fa μ^A−μ^0=E). Ankehitriny A no fenitra vaovao, ary tianay ho azo antoka fa tsara toy ny A ny B. Fomba iray hafa hanoratana ny μB−μA≤−Δ (hypothesis tsy misy) dia ny μB≤μA−Δ. Raha mihevitra isika fa mitovy na lehibe noho ny E, dia μB ≤ μA−E ≤ plasebo. Hitantsika izao fa mihoatra ny μA−E ny tombana ataontsika amin'ny μB, izay mandà tanteraka ny petra-kevitra tsy misy dikany ary mamela antsika hanatsoaka hevitra fa ny B dia tsara toy ny A, fa amin'ny fotoana iray ihany dia mety ho ≤ μ placebo ny μB, izay tsy ny raharaha.inona no ilaintsika. (sary 3).
Sary 3. Fampisehoana ny loza mety hitranga amin'ny fisafidianana ny sisiny tsy ambany. Raha avo loatra ny fanapahana, dia azo tsoahina fa ny B dia tsy ambany noho ny A, saingy tsy azo avahana amin'ny plasebo. Tsy hanakalo zava-mahadomelina izay tena mandaitra kokoa noho ny plasebo (A) amin'ny fanafody mandaitra toy ny plasebo izahay.
Safidin'ny α
Andao hiroso amin'ny fisafidianana α. Azonao atao ny mampiasa ny sanda manara-penitra α = 0,05, saingy tsy rariny tanteraka izany. Ohatra, rehefa mividy zavatra amin'ny Internet ianao ary mampiasa kaody fihenam-bidy maromaro indray mandeha, na dia tsy tokony atambatra aza izy ireo - nanao fahadisoana fotsiny ny mpamorona, dia niala tamin'izany ianao. Araka ny fitsipika, ny sandan'ny α dia tokony mitovy amin'ny antsasaky ny sandan'ny α izay ampiasaina amin'ny fitsapana ny petra-kevitra ambony, izany hoe 0,05 / 2 = 0,025.
Haben'ny santionany
Ahoana ny fanombanana ny haben'ny santionany? Raha mino ianao fa ny tena maha samy hafa ny A sy B dia 0, dia ny santionany kajy ny haben'ny dia mitovy amin'ny fitsapana ny superiority petra-kevitra, afa-tsy ny fanoloana ny vokany eo amin'ny sisiny tsy ambany, raha toa ianao ka mampiasa αtsy ambany fahaiza-manao = 1/2αambonimbony (αtsy ambany=1/2αambonimbony). Raha manana antony hinoanao ianao fa mety ho ratsy kokoa noho ny safidy A ny safidy B, saingy te hanaporofo ianao fa ratsy kokoa noho ny Δ izany, dia vintana ianao! Mampihena ny haben'ny santionanao izany satria mora kokoa ny mampiseho fa ratsy kokoa noho ny A ny B raha toa ianao ka mihevitra fa somary ratsy kokoa fa tsy mitovy.
Ohatra misy vahaolana
Andeha hatao hoe te hanavao ny version B ianao, raha toa ka tsy mihoatra ny 0,1 isa ratsy noho ny version A amin'ny mari-pamantarana fahafaham-po amin'ny mpanjifa 5 isa... Andeha hojerentsika ity olana ity amin'ny fampiasana ny petra-kevitra ambony.
Mba hitsapana ny petra-kevitra ambony, dia kajy ny haben'ny santionany toy izao manaraka izao:
Izany hoe, raha manana fanamarihana 2103 ianao ao amin'ny vondrona misy anao, dia afaka matoky 90% ianao fa hahita vokatra 0,10 na lehibe kokoa. Fa raha avo loatra ho anao ny 0,10, dia mety tsy mendrika ny hitsapana ny petra-kevitra ambony. Mba ho eo amin'ny lafiny azo antoka, azonao atao ny manapa-kevitra ny hanatanteraka ny fianarana amin'ny haben'ny fiantraikany kely kokoa, toy ny 0,05. Amin'ity tranga ity, dia mila 8407 fandinihana, izany hoe, ny santionany dia hitombo efa ho in-4. Ahoana anefa raha mifikitra amin'ny haben'ny santionantsika tany am-boalohany isika, fa nampitombo ny hery ho 0,99 mba ho azo antoka isika raha mahazo vokatra tsara? Amin'ity tranga ity, ny n ho an'ny vondrona iray dia 3676, izay efa tsara kokoa, fa mampitombo ny haben'ny santionany mihoatra ny 50%. Ary vokatr'izany dia mbola tsy ho afaka handà ny petra-kevitra tsy misy dikany isika, ary tsy hahazo valiny amin'ny fanontaniantsika.
Ahoana raha notsapainay ny petra-kevitra tsy ambany noho izany?
Ny haben'ny santionany dia hokajiana amin'ny fampiasana raikipohy mitovy afa-tsy ny denominator.
Ny fahasamihafan'ny raikipohy ampiasaina hitsapana ny petra-kevitra ambony dia toy izao manaraka izao:
— Z1−α/2 dia nosoloina Z1−α, fa raha manao ny zava-drehetra araka ny fitsipika ianao dia soloinao ny α = 0,05 amin'ny α = 0,025, izany hoe mitovy ny isa (1,96)
— (μB−μA) dia hita ao amin'ny denominator
— θ (haben'ny effet) nosoloina Δ (marin'ny tsy ambany)
Raha mihevitra isika fa µB = µA, dia (µB − µA) = 0 ary ny fikajiana ny haben'ny santionany ho an'ny sisiny tsy ambany dia tena ho azontsika raha kajy ny fahamboniana ho an'ny haben'ny vokatra 0,1, tsara! Afaka manao fandalinana mitovy habe isika miaraka amin'ny vinavina samihafa sy fomba fiasa hafa amin'ny fanatsoahan-kevitra, ary ho azontsika ny valin'ny fanontaniana tena tiantsika hovaliana.
Eritrereto izao fa tsy mihevitra isika fa µB = µA ary
Mihevitra izahay fa somary ratsy kokoa ny µB, mety ho 0,01 isa. Izany dia mampitombo ny denominatory, mampihena ny santionany isaky ny vondrona ho 1737.
Inona no mitranga raha ny version B no tena tsara kokoa noho ny version A? Lavintsika ny fiheverana tsy misy dikany fa ny B dia ratsy kokoa noho ny A amin'ny Δ ary manaiky ny fiheverana hafa fa ny B, raha ratsy kokoa, dia tsy ratsy noho ny A amin'ny Δ ary mety ho tsara kokoa. Andramo ny mametraka ity fehin-kevitra ity amin'ny famelabelarana mifanentana ary jereo izay mitranga (tena, andramo). Amin'ny toe-javatra mitodika any aoriana, tsy misy olona te hiorina amin'ny "tsy mihoatra ny Δ ratsy kokoa ary mety tsara kokoa."
Amin'ity tranga ity, dia afaka manao fanadihadiana isika, izay antsoina hoe "fitsapana ny fiheverana fa ny iray amin'ireo safidy dia ambony na ambany noho ny iray hafa." Mampiasa petra-kevitra roa izy io:
Ny andiany voalohany (mitovy amin'ny fitsapana ny petra-kevitra tsy ambany loatra):
Sehatra faharoa (mitovy amin'ny fitsapana ny petra-kevitra ambony):
Mitsapa ny petra-kevitra faharoa ihany isika raha lavina ny voalohany. Rehefa manao fitiliana misesy isika dia mitazona ny tahan'ny fahadisoana Type I (α). Amin'ny fampiharana, azo atao izany amin'ny famoronana elanelana fahatokisana 95% ho an'ny fahasamihafana eo amin'ny fitaovana sy ny fitsapana mba hamaritana raha lehibe kokoa noho ny -Δ ny elanelana manontolo. Raha tsy mihoatra ny -Δ ny elanelam-potoana, dia tsy afaka mandà ny sanda tsy misy dikany isika ary mijanona. Raha toa ka lehibe noho ny −Δ ny elanelam-potoana manontolo, dia hitohy ary hojerentsika raha misy 0 ny elanelana.
Misy karazana fikarohana hafa izay tsy noresahintsika - fianarana mitovy.
Ireo karazana fianarana ireo dia azo soloina amin'ny fianarana tsy ambany ary ny mifamadika amin'izany, saingy manana fahasamihafana lehibe izy ireo. Ny fitsarana tsy manambany dia mikendry ny hampiseho fa ny safidy B dia farafaharatsiny mitovy amin'ny A. Ny fitsapana mitovy dia mikendry ny hampiseho fa ny safidy B dia farafaharatsiny mitovy amin'ny A. Ny safidy A dia tsara amin'ny B, izay sarotra kokoa. Amin'ny ankapobeny, miezaka ny hamantatra raha eo anelanelan'ny −Δ sy Δ ny elanelana fahatokisana manontolo amin'ny fahasamihafan'ny fomba. Mitaky haben'ny santionany lehibe kokoa ny fianarana toy izany ary atao matetika kokoa. Noho izany, amin'ny manaraka anao hanao fandalinana izay ny tanjonao lehibe dia ny hahazoana antoka fa tsy ratsy kokoa ny dikan-teny vaovao, dia aza mionona amin'ny "tsy fahombiazana mandà ny vinavina tsy misy dikany." Raha te hanandrana petra-kevitra tena manan-danja ianao, dia diniho ny safidy samihafa.
Source: www.habr.com