Ou ka tande pale de analis, aprantisaj machin ak espesyalis entèlijans atifisyèl, men èske ou te tande pale de moun ki peye anplis enjis? Rankontre done charlatan! Hack sa yo, atire pa travay likwatif, bay syantis done reyèl yon move non. Nan materyèl la nou konprann ki jan yo mennen moun sa yo nan dlo pwòp.
Done charlatans yo toupatou
Done charlatans yo tèlman bon nan kache nan je klè ke ou kapab dwe youn nan yosan yo pa menm reyalize li. Gen anpil chans, òganizasyon w lan te ebèje mesye sa yo sournwa pou ane, men bon nouvèl la se ke yo fasil yo idantifye si ou konnen ki sa yo gade pou.
Premye siy avètisman an se yon mank de konpreyansyon sa analytics ak estatistik yo trè diferan disiplin. Mwen pral eksplike sa a pi lwen.
Diferan disiplin
Statistik yo resevwa fòmasyon pou tire konklizyon sou sa ki ale pi lwen pase done yo, analis yo resevwa fòmasyon pou egzamine kontni an nan yon seri done. Nan lòt mo, analis yo tire konklizyon sou sa ki nan done yo, ak statistik yo tire konklizyon sou sa ki pa nan done yo. Analis yo ede w poze bon kesyon (fè ipotèz), epi statistik yo ede w jwenn bon repons (teste ipotèz ou yo).
Genyen tou wòl ibrid etranj kote yon moun ap eseye chita sou de chèz... Poukisa pa? Prensip debaz nan syans done: si w ap fè fas ak ensètitid, ou pa ka itilize menm bagay la tou pwen done pou ipotèz ak tès. Lè done yo limite, ensètitid fòse yon chwa ant estatistik oswa analytics. Eksplikasyon .
San estatistik, w ap bloke epi w pa ka konprann si jijman ou sot fè a kenbe, epi san analiz, w ap deplase avèg, ak ti chans pou donte enkoni. Sa a se yon chwa difisil.
Fason charlatan an soti nan dezòd sa a se inyore li epi answit pran pòz sezi pa sa ki toudenkou parèt. Lojik ki dèyè tès ipotèz estatistik yo desann sou kesyon si done yo sipriz nou ase pou chanje lide. Ki jan nou ka sezi pa done si nou te deja wè li?
Chak fwa charlatan yo jwenn yon modèl, yo jwenn enspire, Lè sa a, tcheke menm done pou menm modèl la, yo pibliye rezilta a ak yon valè p lejitim oswa de, akote teyori yo. Kidonk, yo ap bay ou manti (e, petèt, yo menm tou). Valè p sa a pa gen pwoblèm si ou pa rete soude ak ipotèz ou до ki jan ou wè done ou yo. Charlatans imite aksyon analis yo ak estatistik yo san yo pa konprann rezon yo. Kòm yon rezilta, tout domèn syans done vin yon move repitasyon.
Vrè estatistik yo toujou tire pwòp konklizyon yo
Mèsi a repitasyon prèske mistik statistikisyen yo pou rezònman solid yo, kantite fo enfòmasyon nan Syans Done se nan yon maksimòm tout tan. Li fasil pou twonpe epi yo pa pran, sitou si viktim nan san mefyans panse li nan tout sou ekwasyon ak done. Yon seri done se yon seri done, pa vre? Non. Li enpòtan ki jan ou sèvi ak li.
Erezman, ou sèlman bezwen yon sèl siy trape charlatans yo: yo "retroactively dekouvri Amerik." Lè yo redekouvwi fenomèn ke yo deja konnen yo prezan nan done yo.
Kontrèman ak charlatan yo, bon analis yo ouvè-espri epi yo konprann ke lide enspirasyon ka gen anpil eksplikasyon diferan. An menm tan an, bon statistikisyen byen defini konklizyon yo anvan yo fè yo.
Analis yo egzante de responsablite... osi lontan ke yo rete nan sijè ki abòde lan done yo. Si yo tante pou yo reklame yon bagay yo pa t 'wè, sa se yon lòt travay. Yo ta dwe wete soulye analis la epi mete soulye statistikisyen an. Apre yo tout, kèlkeswa tit travay ofisyèl la, pa gen okenn règ ki di ou pa ka etidye tou de pwofesyon si ou vle. Jis pa konfonn yo.
Jis paske ou bon nan estatistik pa vle di ou bon nan analytics, ak vis vèrsa. Si yon moun eseye di ou otreman, ou ta dwe pridan. Si moun sa a di ou ke li se akseptab tire konklizyon estatistik nan done ke ou te deja etidye, sa a se yon rezon ki fè yo dwe doubl mefyan.
Eksplikasyon dwòl
Lè w ap obsève charlatan done yo nan bwa, ou pral remake ke yo renmen fè istwa kokenn pou "eksplike" done yo obsève. Plis akademik, pi bon. Li pa enpòtan ke istwa sa yo ajiste nan retwouve.
Lè charlatan fè sa - se pou mwen klè - yo bay manti. Pa gen okenn kantite ekwasyon oswa konsèp anpenpan ki ka fè moute pou lefèt ke yo ofri zewo prèv nan teyori yo. Ou pa bezwen sezi pa jan eksplikasyon yo dwòl.
Sa a se menm bagay la kòm demontre kapasite "psychic" ou pa premye gade nan kat yo nan men ou ak Lè sa a, predi sa w ap kenbe ... sa w ap kenbe. Sa a se patipri retwouve, ak pwofesyon syans done yo plen nan rabò ak li.
Analis yo di: "Ou jis ale ak Rèn nan Diamonds." Statistik yo di, “Mwen te ekri ipotèz mwen yo sou papye sa a anvan nou te kòmanse. Ann jwe epi gade kèk done epi wè si mwen gen rezon." Charlatan yo di: "Mwen te konnen ou ta pral vin Rèn Diamonds sa a paske..."
Done pataje se ranje rapid ke tout moun bezwen.
Lè pa gen anpil done, ou dwe chwazi ant estatistik ak analytics, men lè gen plis pase ase done, gen yon gwo opòtinite yo sèvi ak analytics san yo pa twonpe. и estatistik. Ou gen defans pafè kont charlatans - separasyon done epi, nan opinyon mwen, sa a se lide ki pi pwisan nan Syans Done.
Pou pwoteje tèt ou kont charlatan, tout sa ou bezwen fè se asire w ke ou kenbe kèk done tès yo pa rive nan je furter yo, ak Lè sa a, trete rès la kòm analytics. Lè w rankontre yon teyori ke w gen risk pou w aksepte, sèvi ak li pou evalye sitiyasyon an, epi answit revele done tès sekrè w yo pou w tcheke si teyori a pa gen sans. Li tèlman senp!
Asire w ke pèsonn pa gen dwa wè done tès yo pandan faz eksplorasyon an. Pou fè sa, rete sou done rechèch. Done tès yo pa ta dwe itilize pou analiz.
Sa a se yon gwo etap nan sa moun yo te itilize nan epòk la "ti done", kote ou dwe eksplike ki jan ou konnen sa ou konnen yo nan lòd yo finalman konvenk moun ke ou aktyèlman konnen yon bagay.
Aplike menm règ yo pou ML/AI
Gen kèk charlatan ki poze kòm ekspè ML / AI yo fasil pou wè tou. Ou pral trape yo menm jan ou ta trape nenpòt lòt move enjenyè: "solisyon yo" yo eseye bati toujou echwe. Yon siy avètisman bonè se mank de eksperyans ak lang pwogram estanda endistri ak bibliyotèk.
Men, e moun ki kreye sistèm ki sanble travay? Ki jan ou fè konnen si yon bagay sispèk ap pase? Menm règ la aplike! Charlatan an se yon pèsonaj dezas ki montre w kouman modèl la te travay... sou menm done yo te itilize pou kreye modèl la.
Si ou te bati yon sistèm aprantisaj machin ensanèi konplèks, ki jan ou fè konnen ki jan li bon? Ou p ap konnen jiskaske ou montre li travay ak nouvo done li pa te wè anvan.
Lè ou te wè done yo anvan previzyon - li fasil anvandi
Lè ou gen ase done pou separe, ou pa bezwen site bote fòmil ou yo pou jistifye pwojè a (yon vye abitid mòd mwen wè toupatou, pa sèlman nan syans). Ou ka di: "Mwen konnen li travay paske mwen ka pran yon seri done ke mwen pa te wè anvan ak predi egzakteman sa ki pral rive la ... epi mwen pral gen rezon. Ankò e ankò".
Tès modèl/teyori ou kont nouvo done se pi bon baz pou konfyans.
Mwen pa tolere data charlatans. Mwen pa pran swen si opinyon w baze sou diferan trik. Mwen pa enpresyone pa bote eksplikasyon yo. Montre m ke teyori/modèl ou a ap travay (e li kontinye travay) sou yon pakèt nouvo done ou pa janm wè anvan. Sa a se tès la reyèl nan fòs la nan opinyon ou.
Kontakte Ekspè Syans Done yo
Si ou vle pou tout moun ki konprann imè sa a pran oserye, sispann kache dèyè ekwasyon anpenpan pou sipòte prejije pèsonèl. Montre m sa ou genyen. Si ou vle moun ki "jwenn li" yo wè teyori/modèl ou kòm plis pase jis pwezi enspirasyon, gen kouraj pou mete sou yon gwo montre nan kòman li byen travay sou yon seri done konplètman nouvo ... devan temwen. !
Fè apèl bay lidè yo
Refize pran oserye nenpòt "lide" sou done yo jiskaske yo teste yo nouvo done. Ou pa santi anvi fè efò? Rete ak analytics yo, men pa konte sou lide sa yo-yo pa fyab epi yo pa te teste pou fyab. Anplis, lè yon òganizasyon gen done an abondans, pa gen okenn inconvénient pou fè separasyon fondamantal nan syans ak kenbe li nan nivo enfrastrikti pa kontwole aksè nan done tès pou estatistik. Sa a se yon bon fason yo sispann moun ap eseye twonpe ou!
Si ou vle wè plis egzanp charlatans jiska pa bon - .
Rezilta
Lè gen twò piti done pou separe, sèlman yon charlatan eseye estrikteman swiv enspirasyon pa dekouvri Amerik retrospektiv, matematikman redekouvwi fenomèn deja konnen yo dwe nan done yo, epi rele sipriz la estatistik enpòtan. Sa a fè distenksyon ant yo soti nan analis la louvri lespri, ki moun ki fè fas ak enspirasyon, ak statistik nan metikuleu, ki ofri prèv lè yo fè prediksyon.
Lè gen anpil done, pran abitid separe done yo pou ou ka gen pi bon nan tou de mond yo! Asire ou ke ou fè analiz ak estatistik separeman pou sou-ensemble endividyèl nan pil orijinal la nan done.
- Analis ofri ou enspirasyon ak ouvè-espri.
- Estatistik ofri w tès solid.
- Charlatans ofri w yon retwovizè tòde ki pretann yo dwe analytics plis estatistik.
Petèt, apre w fin li atik la, w ap panse “Èske mwen se yon charlatan”? Sa a se byen. Gen de fason yo debarase m de panse sa a: premye, gade dèyè, wè sa ou te fè, si travay ou ak done te pote benefis pratik. Ak dezyèmman, ou ka toujou travay sou kalifikasyon ou yo (ki sètènman pa pral initil), espesyalman depi nou bay elèv nou yo ladrès pratik ak konesans ki pèmèt yo vin syantis done reyèl.
Plis kou
Li piplis
Sous: www.habr.com