Шарлатанро аз Data Science чӣ гуна бояд шинохт?

Шарлатанро аз Data Science чӣ гуна бояд шинохт?
Шояд шумо дар бораи таҳлилгарон, омӯзиши мошинсозӣ ва мутахассисони зеҳни сунъӣ шунидаед, аммо шумо дар бораи онҳое, ки беадолатона музд мегиранд, шунидаед? Вохӯред маълумот шарлатан! Ин ҳакерҳо, ки ба кори фоидаовар ҷалб карда шудаанд, ба олимони воқеии маълумот номи бад медиҳанд. Дар мавод мо мефаҳмем, ки чӣ гуна ин гуна одамонро ба оби тоза овардан мумкин аст.

Шарлатанҳои маълумот дар ҳама ҷо ҳастанд

Шарлатанҳои маълумот чунон хубанд, ки дар пеши назари ошкор пинҳон шаванд, ки шумо метавонед яке аз онхо бошедхатто дарк накарда. Эҳтимол аст, ки ташкилоти шумо ин бачаҳои маккорро солҳо боз нигоҳ медорад, аммо хушхабар ин аст, ки онҳоро муайян кардан осон аст, агар шумо медонед, ки чӣ бояд кард.
Аввалин аломати огоҳкунанда ин набудани фаҳмиши он аст таҳлил ва омор фанҳои хеле гуногун мебошанд. Ман инро минбаъд шарҳ медиҳам.

Фанхои гуногун

Оморгарон барои хулоса баровардан дар бораи он чизе, ки аз маълумоти онҳо берун аст, омӯзонида мешаванд, таҳлилгарон барои омӯхтани мундариҷаи маҷмӯи додаҳо омӯзонида мешаванд. Ба ибораи дигар, таҳлилгарон дар бораи он чизе, ки дар маълумоти онҳо мавҷуданд, ва оморҳо дар бораи он чизе, ки дар маълумот нест, хулоса мебароранд. Таҳлилгарон ба шумо дар додани саволҳои хуб (гипотезаҳо) кӯмак мекунанд ва оморчиён ба шумо барои гирифтани ҷавобҳои хуб (санҷидани фарзияҳои худ) кӯмак мекунанд.

Инчунин нақшҳои дурагаи аҷибе ҳастанд, ки дар онҳо шахс кӯшиш мекунад, ки дар ду курсӣ нишинад... Чаро не? Принсипи асосии илми маълумот: агар шумо бо номуайянӣ сарукор дошта бошед, шумо наметавонед истифода баред ҳамин гуна нуқтаи маълумот барои гипотеза ва санҷиш. Вақте ки маълумот маҳдуд аст, номуайянӣ интихоби байни омор ё таҳлилро маҷбур мекунад. Шарҳ дар ин ҷо.

Бидуни омор, шумо дармонда мешавед ва наметавонед бифаҳмед, ки оё доварие, ки шумо таҳия кардаед, иҷро мешавад ё не ва бидуни таҳлил, шумо кур-курона ҳаракат мекунед ва имкони ками ром кардани номаълумро доред. Ин интихоби душвор аст.

Роҳи раҳоӣ аз ин бесарусомонӣ аз он иборат аст, ки ба он нодида гирифта, баъд вонамуд кардан аз он чизе ки ногаҳон рӯй медиҳад, ҳайрон шуда бошад. Мантиқи паси санҷиши гипотезаҳои оморӣ ба саволи он меояд, ки оё маълумот моро ба қадри кофӣ ба ҳайрат меорад, то тафаккури моро тағир диҳад. Чӣ тавр мо метавонем аз маълумот ҳайрон шавем, агар мо онро аллакай дида бошем?

Ҳар вақте, ки шарлатон намунае пайдо кунанд, онҳо илҳом мегиранд ва сипас тафтиш мекунанд ҳамон маълумот барои ҳамон намуна, барои нашр кардани натиҷа бо як ё ду арзиши қонунии p-, дар паҳлӯи назарияи онҳо. Ҳамин тавр, онҳо ба ту (ва шояд ба худашон ҳам) дурӯғ мегӯянд. Ин арзиши p аҳамият надорад, агар шумо ба гипотезаи худ пайваст нашавед ба чӣ гуна шумо маълумоти худро дидаед. Шарлатон ба амалҳои таҳлилгарону оморчиён тақлид мекунанд, сабабҳоро нафаҳманд. Дар натиҷа, тамоми соҳаи илми маълумот обрӯи бад пайдо мекунад.

Оморшиносони ҳақиқӣ ҳамеша худашон хулоса мебароранд

Ба шарофати эътибори қариб мистикии оморчиён барои далелҳои дақиқи онҳо, миқдори маълумоти қалбакӣ дар Data Science дар ҳама давру замон баланд аст. Фиреб кардан ва ба даст наафтидан осон аст, хусусан агар ҷабрдидаи бехабар фикр кунад, ки ин ҳама дар бораи муодилаҳо ва додаҳост. Маҷмӯи додаҳо маҷмӯи додаҳост, дуруст? Не. Муҳим он аст, ки шумо онро чӣ гуна истифода мебаред.

Хушбахтона, барои дастгир кардани шарлатанҳо ба шумо танҳо як маслиҳат лозим аст: онҳо "ба таври бозгашт Амрикоро кашф мекунанд". Бо аз нав кашф кардани падидаҳое, ки онҳо аллакай медонанд, дар маълумот мавҷуданд.

Баръакси шарлатанҳо, таҳлилгарони хуб кушодаанд ва дарк мекунанд, ки ғояҳои илҳомбахш метавонанд шарҳҳои гуногун дошта бошанд. Дар баробари ин, оморшиносони хуб пеш аз қабули хулосаҳои худ бодиққат муайян мекунанд.

Таҳлилгарон аз масъулият озоданд... ба шарте ки онҳо дар доираи маълумоти худ бимонанд. Агар онҳо васваса кунанд, ки чизеро, ки надидаанд, даъво кунанд, ин кори дигар аст. Онҳо бояд кафшҳои таҳлилгарро кашида, кафшҳои оморро ба бар кунанд. Охир, новобаста аз он ки унвони мансаби расмӣ чӣ гуна аст, ягон қоидае вуҷуд надорад, ки агар хоҳед, ҳарду касбро омӯхта наметавонед. Фақат онҳоро омехта накунед.

Танҳо аз сабаби он ки шумо дар омор хуб ҳастед, маънои онро надорад, ки шумо дар таҳлил хуб ҳастед ва баръакс. Агар касе кӯшиш кунад, ки ба шумо чизи дигаре бигӯяд, шумо бояд эҳтиёт бошед. Агар ин шахс ба шумо гӯяд, ки аз маълумоте, ки шумо аллакай омӯхтаед, хулосаи оморӣ баровардан ҷоиз аст, ин сабаби дучанд эҳтиёт шудан аст.

Шарҳҳои аҷиб

Ҳангоми мушоҳидаи шарлатанҳои додаҳо дар ваҳшӣ, шумо хоҳед дид, ки онҳо дӯст медоранд, ки ҳикояҳои афсонавӣ эҷод кунанд, то маълумоти мушоҳидакардаашонро “фаҳмонанд”. Чӣ қадаре ки академикӣ зиёдтар бошад, ҳамон қадар беҳтар аст. Муҳим нест, ки ин ҳикояҳо дар паси гузашта ислоҳ шудаанд.

Вақте ки шарлатанҳо ин корро мекунанд, - бигзор ман равшан бошам, - онҳо дурӯғ мегӯянд. Ҳеҷ як миқдори муодилаҳо ё мафҳумҳои афсонавӣ наметавонад далели сифрии назарияҳои худро пешниҳод кунад. Аз он ки тавзеҳоти онҳо то чӣ андоза ғайриоддӣ аст, ҳайрон нашавед.

Ин ҳамон чизест, ки қобилиятҳои "психикии"-и худро нишон дода, аввал ба кортҳои дар дастатон нигоҳ кардан ва сипас пешгӯии он чизе, ки шумо дар даст доред... Ин як ғарази бозгашт аст ва касби илми маълумот бо он пур аст.

Шарлатанро аз Data Science чӣ гуна бояд шинохт?

Таҳлилгарон мегӯянд: "Шумо танҳо бо Маликаи алмосҳо рафтед." Оморшиносон мегӯянд, “ман пеш аз оғози кор фарзияҳои худро дар ин коғаз навишта будам. Биёед дар гирду атроф бозӣ кунем ва баъзе маълумотҳоро бубинем ва бубинем, ки оё ман дуруст ҳастам." Шарлатанҳо мегӯянд: "Ман медонистам, ки шумо ин Маликаи алмосҳо мешавед, зеро ..."

Мубодилаи маълумот як ислоҳи зудест, ки ба ҳама ниёз дорад.

Вақте ки маълумоти зиёд мавҷуд нест, шумо бояд байни омор ва таҳлил интихоб кунед, аммо вақте ки маълумоти кофӣ вуҷуд дорад, имконияти хуб барои истифодаи таҳлил бидуни фиреб вуҷуд дорад. и омор. Шумо муҳофизати комил аз шарлатанҳо доред - ҷудокунии додаҳо ва ба андешаи ман, ин тавонотарин идея дар Data Science аст.

Барои муҳофизат кардани худ аз шарлатанҳо, ба шумо танҳо лозим аст, ки итминон ҳосил кунед, ки баъзе маълумоти санҷиширо аз дастрасии чашмони онҳо дур нигоҳ доред ва сипас боқимондаро ҳамчун таҳлил баррасӣ кунед. Вақте ки шумо бо назарияе дучор мешавед, ки шумо хавфи қабул кардан доред, онро барои арзёбии вазъият истифода баред ва сипас маълумоти махфии санҷиши худро ошкор кунед, то тафтиш кунед, ки назария сафсата нест. Ин хеле содда аст!

Шарлатанро аз Data Science чӣ гуна бояд шинохт?
Боварӣ ҳосил кунед, ки дар марҳилаи иктишоф ҳеҷ кас иҷозати дидани маълумоти санҷишро надорад. Барои ин, ба маълумоти тадқиқот пайваст шавед. Маълумоти санҷиш набояд барои таҳлил истифода шавад.

Ин як қадами бузург аз он чизест, ки одамон дар давраи "маълумоти хурд" одат кардаанд, ки дар он шумо бояд фаҳмонед, ки чӣ гуна шумо медонед, ки чӣ гуна медонед, то дар ниҳоят одамонро бовар кунонед, ки шумо воқеан чизе медонед.

Ҳамин қоидаҳоро ба ML/AI татбиқ кунед

Баъзе шарлатанҳое, ки худро ҳамчун коршиноси ML/AI муаррифӣ мекунанд, инчунин фаҳмидан осон аст. Шумо онҳоро ҳамон тавре, ки шумо ягон муҳандиси бадро сайд мекунед, дастгир хоҳед кард: "ҳалҳое", ки онҳо барои сохтани онҳо пайваста ноком мешаванд. Аломати огоҳии пешакӣ набудани таҷриба бо забонҳо ва китобхонаҳои стандартии барномасозӣ мебошад.

Аммо дар бораи одамоне, ки системаҳоеро эҷод мекунанд, ки ба назар кор мекунанд? Чӣ тавр шумо медонед, ки ягон чизи шубҳанок рӯй медиҳад? Ҳамин қоида амал мекунад! Шарлатан як хислати бадхоҳ аст, ки ба шумо нишон медиҳад, ки модел то чӣ андоза хуб кор кардааст... дар ҳамон маълумоте, ки онҳо ҳангоми сохтани модел истифода кардаанд.

Агар шумо системаи омӯзиши мошинсозии бениҳоят мураккаб сохта бошед, шумо аз куҷо медонед, ки он то чӣ андоза хуб аст? То он даме, ки ба ӯ кор бо маълумоти наверо, ки қаблан надида буд, нишон надиҳед, шумо намедонед.

Вақте ки шумо маълумотро пеш аз пешгӯӣ дидед - ин гумон аст пеш аз онгуфтан

Вақте ки шумо барои ҷудо кардани маълумоти кофӣ доред, ба шумо лозим нест, ки зебоии формулаҳои худро барои асоснок кардани лоиҳа истинод кунед (одати мӯди кӯҳнаро ман дар ҳама ҷо мебинам, на танҳо дар илм). Шумо метавонед бигӯед: "Ман медонам, ки ин кор мекунад, зеро ман метавонам маҷмӯи маълумотеро, ки қаблан надидаам, бигирам ва аниқ пешгӯӣ кунам, ки дар он ҷо чӣ рӯй медиҳад ... ва ман дуруст хоҳам буд. Боз ва боз».

Санҷиши модели/назарияи шумо дар муқоиса бо маълумоти нав беҳтарин асоси эътимод аст.

Ман шарлатанҳои маълумотро таҳаммул намекунам. Ба ман фарқ надорад, ки фикри шумо ба ҳилаҳои гуногун асос ёфтааст. Ман аз зебоии шарҳҳо ба ҳайрат наомадаам. Ба ман нишон диҳед, ки назария/модели шумо дар як қатор маълумоти нав кор мекунад (ва кор карданро идома медиҳад), ки шумо қаблан надидаед. Ин санҷиши воқеии қувваи андешаи шумост.

Тамос бо коршиносони илми маълумот

Агар шумо хоҳед, ки аз ҷониби ҳамаи онҳое, ки ин ҳазлу ҳазлро мефаҳманд, ҷиддӣ қабул карда шаванд, пас аз муодилаҳои зебо пинҳон шуданро бас кунед, то ғаразҳои шахсиро дастгирӣ кунед. Ба ман нишон диҳед, ки шумо чӣ доред. Агар шумо хоҳед, ки онҳое, ки онро "ба даст" меоранд, назария/модели шуморо на танҳо шеъри илҳомбахш бубинанд, ҷуръат кунед, то намоиши олиҷаноберо, ки то чӣ андоза он дар маҷмӯи комилан нави додаҳо кор мекунад... дар назди шоҳидон намоиш диҳед. !

Мурочиат ба рохбарон

То он даме, ки онҳо санҷида нашаванд, аз қабули ҳама гуна "идеяҳо" дар бораи маълумот худдорӣ кунед аз нав маълумот. Оё ҳис намекунед, ки кӯшиш кунед? Бо таҳлилҳо пайваст шавед, аммо ба ин ғояҳо такя накунед - онҳо беэътимод ҳастанд ва барои эътимоднокӣ санҷида нашудаанд. Гузашта аз ин, вақте ки созмон дорои маълумоти фаровон аст, барои ҷудошавӣ дар илм ва нигоҳ доштани он дар сатҳи инфрасохтор тавассути назорати дастрасӣ ба маълумоти санҷишӣ барои омор ҳеҷ камбудие вуҷуд надорад. Ин як роҳи олиест барои боздоштани одамоне, ки шуморо фиреб медиҳанд!

Агар шумо хоҳед, ки мисолҳои бештари шарлатанҳоро бубинед, то бефоида бошад - ин ҷо як риштаи олиҷаноб дар Twitter аст.

Натиҷаҳо

Вақте ки барои ҷудо кардани маълумот хеле кам аст, танҳо як шарлатан кӯшиш мекунад, ки илҳомро бо роҳи ретроспективӣ кашф кунад, падидаҳои аллакай дар маълумот мавҷудбударо аз ҷиҳати математикӣ дубора кашф кунад ва ногаҳонии аз ҷиҳати оморӣ муҳим номида шавад. Ин онҳоро аз таҳлилгари кушодафикр, ки бо илҳом сарукор дорад ва оморшиноси бодиққат, ки ҳангоми пешгӯӣ далел пешниҳод мекунад, фарқ мекунад.

Вақте ки маълумот зиёд аст, ба ҷудо кардани маълумот одат кунед, то шумо беҳтарини ҳарду ҷаҳонро дошта бошед! Боварӣ ҳосил кунед, ки таҳлил ва оморро барои зермаҷмӯаҳои алоҳидаи маҷмӯаи аслии маълумот алоҳида анҷом диҳед.

  • Таҳлилгарон ба шумо илҳом ва кушодафикрӣ пешниҳод мекунад.
  • Омор ба шумо озмоиши ҷиддиро пешниҳод мекунад.
  • Шарлатон ба шумо як ақидаи печидаеро пешниҳод мекунад, ки худро таҳлил ва омор вонамуд мекунад.

Эҳтимол, пас аз хондани мақола, шумо фикр мекунед, ки "ман шарлатан ҳастам"? Ин хуб аст. Ду роҳи халос шудан аз ин фикр вуҷуд дорад: аввал, ба қафо нигоҳ кунед, бубинед, ки шумо чӣ кор кардаед, оё коратон бо маълумот фоидаи амалӣ овард ё не. Ва дуюм, шумо ҳоло ҳам метавонед дар рӯи тахассуси худ кор кунед (ки бешубҳа зиёдатӣ нахоҳад буд), алахусус аз он ки мо ба донишҷӯёни худ малака ва донишҳои амалӣ медиҳем, ки ба онҳо донишманди воқеии маълумот шаванд.

Шарлатанро аз Data Science чӣ гуна бояд шинохт?

Курсҳои бештар

Бештар

Манбаъ: will.com

Илова Эзоҳ