HIROSHI WATANABE / GETTY IMAGES
Di The Wealth of Nations de, Adam Smith nîşan dide ku dabeşkirina kar çawa dibe çavkaniya sereke ya zêdekirina hilberînê. Nimûneyek rêza meclîsa kargeheke pîneyê ye: "Karkerek têlê dikişîne, yekî din rast dike, yê sêyem jê dibire, yê çaran dawiya wê tûj dike, yê pêncan jî dawiya din diqelişe da ku serê xwe bigre." Bi spasiya pisporiya ku li ser fonksiyonên taybetî sekinîn, her karmend di peywira xweya teng de dibe pisporek pir jêhatî, ku dibe sedema zêdebûna karbidestiya pêvajoyê. Hilbera her karkerek gelek caran zêde dibe, û kargeh di hilberîna pincaran de bikêrtir dibe.
Ev dabeşkirina kar ji hêla fonksiyonê ve îro jî ew qas di hişê me de cih girtiye ku me zû tîmên xwe li gorî wê organîze kir. Zanista Daneyan ne îstîsna ye. Kapasîteyên karsaziya algorîtmîkî yên tevlihev hewceyê gelek fonksiyonên xebatê hewce dike, ji ber vê yekê pargîdan bi gelemperî tîmên pisporan diafirînin: lêkolîner, endezyarên daneyê, endezyarên fêrbûna makîneyê, zanyarên sedem-encam û hwd. Karê pisporan ji hêla gerînendeyê hilberê ve bi veguheztina fonksiyonan bi rengek ku dişibihe kargehek pin tê hevrêz kirin: "kesek daneyan distîne, yekî din modela wê dike, yê sêyem wê pêk tîne, tedbîrên çaremîn" û hwd.
Mixabin, divê em tîmên xwe yên Zanistiya Daneyê xweşbîn nekin da ku hilberîneriyê baştir bikin. Lêbelê, hûn vê yekê dikin dema ku hûn fêm dikin ka hûn çi hilberînin: pin an tiştek din, û tenê hewl didin ku karbidestiyê zêde bikin. Armanca xetên kombûnê temamkirina karekî ye. Em bi rastî dizanin ku em çi dixwazin - pin (wek mînaka Smith), lê her hilberek an karûbar dikare were behs kirin ku tê de hewcedarî bi tevahî hemî aliyên hilberê û tevgera wê diyar dike. Rola karmendan ev e ku van hewcedariyên bi qasî ku gengaz pêk bînin.
Lê armanca Zanistiya Daneyê ne temamkirina karan e. Di şûna wê de, armanc ew e ku keşfkirin û pêşvebirina derfetên karsaziya nû ya bihêz. Hilber û karûbarên algorîtmîkî yên wekî pergalên pêşniyarê, danûstendinên xerîdar, dabeşkirina tercîhên şêwazê, mezinbûn, sêwirana kincan, xweşbîniya lojîstîkê, tespîtkirina trenda demsalî û hêj bêtir nekarin pêşde werin pêşve xistin. Divê ew bêne lêkolîn kirin. Ne nexşeyên ku bêne dubare kirin tune, ev îmkanên nû yên bi nezelaliya xwerû ne. Pêdivî ye ku jimare, model, celebên model, hîperparametre, hemî hêmanên pêwîst bi ceribandin, ceribandin û xeletî û dubarekirinê bêne fêr kirin. Bi pîneyan, perwerdekirin û sêwirandin di pêşiya hilberînê de têne kirin. Bi Zanistiya Daneyê, hûn wekî ku hûn dikin, ne berê fêr dibin.
Di kargehek pin de, dema ku perwerdehiya pêşîn tê, em ne li bendê ne û ne jî dixwazin ku karker li ser ti taybetmendiyek hilberê ji bilî baştirkirina kargêriya hilberînê pêşde bibin. Karên pisporî watedar e ji ber ku ew rê li ber karîgeriya pêvajoyê û hevgirtina hilberînê vedike (bêyî guhertinên di hilbera paşîn de).
Lê gava ku hilber hîn jî pêş dikeve û armanc perwerde ye, pisporî di rewşên jêrîn de bi armancên me re têkildar dibe:
1. Ew lêçûnên hevrêziyê zêde dike.
Ango, ew lêçûnên ku di dema danûstandin, nîqaş, rewakirin û pêşîgirtina karê ku divê were kirin de kom dibin. Van lêçûn li gorî hejmara kesên ku tev lê dibin super-xêz têne pîvandin. (Çawa ku J. Richard Hackman hînî me kir, hejmara têkiliyan r li gorî vê hevkêşeyê bi heman awayî li gorî fonksiyona hejmara terman n mezin dibe: r = (n^2-n)/2. Û her têkilî hindek ji têkiliya lêçûnê.) Dema ku zanyarên daneyê ji hêla fonksiyonê ve têne organîze kirin, di her qonaxê de, bi her guhartinê, her radestkirinê, hwd., Gelek pispor hewce ne, ku lêçûnên hevrêziyê zêde dike. Mînakî, modelên îstatîstîkî yên ku dixwazin bi taybetmendiyên nû biceribînin dê neçar bin ku bi endezyarên daneyê re hevrêz bikin ku her carê ku ew dixwazin tiştek nû biceribînin li daneyên daneyan zêde dikin. Di heman demê de, her modela nû ya ku hatî perwerde kirin tê vê wateyê ku pêşdebirê modelê hewce dike ku kesek bi hevrêziyê re bike da ku wê bike hilberînê. Mesrefên koordînasyonê wekî bihayek dubarekirinê tevdigerin, wan dijwartir û bihatir dike û dibe sedem ku lêkolîn were terikandin. Ev dibe ku di fêrbûnê de asteng bike.
2. Demên bendewariyê dijwar dike.
Ji lêçûnên koordînasyonê jî dijwartir dema windabûna di navbera guheztinên kar de ye. Dema ku lêçûnên hevrêziyê bi gelemperî bi demjimêran têne pîvandin - wextê ku ji bo pêkanîna civîn, nîqaş, vekolînên sêwiranê digire - dema bendê bi gelemperî bi roj, hefte an jî mehan tê pîvandin! Bernameyên pisporên fonksîyonel hevsengkirina dijwar e ji ber ku divê her pispor li gelek projeyan were belavkirin. Civînek yek-saetê ji bo nîqaşkirina guhertinan dikare hefteyan bidome da ku karûbar bişoxilîne. Û piştî lihevkirina li ser guhertinan, pêdivî ye ku meriv karê rastîn bixwe di çarçoweya gelek projeyên din ên ku dema xebata pisporan digire de plansaz bike. Karê ku bi rastkirinên kodê an lêkolîna ku tenê çend demjimêr an rojan digire ji bo qedandinê dibe ku pir dirêjtir bigire berî ku çavkanî peyda bibin. Heta wê demê, dubarekirin û fêrbûn têne sekinandin.
3. çerçoveyê teng dike.
Dabeşkirina kar dikare bi awayekî sûnî fêrbûnê sînordar bike bi xelatkirina mirovan ji bo mayîna di pisporiya xwe de. Mînakî, zanyarek lêkolîner ku pêdivî ye ku di çarçoweya fonksiyona xwe de bimîne, dê enerjiya xwe li ser ceribandina cûreyên cûda yên algorîtmayan bisekine: paşveçûn, torên neuralî, daristana rasthatî û hwd. Bê guman, vebijarkên algorîtmaya baş dikare bibe sedema pêşveçûnên zêde, lê bi gelemperî pir zêde heye ku ji çalakiyên din were bidestxistin, wek mînak yekkirina çavkaniyên daneya nû. Bi vî rengî, ew ê bibe alîkar ku modelek pêşve bibe ku her bit hêza ravekirinê ya ku di daneyê de ye bikar tîne. Lêbelê, hêza wê dibe ku di guheztina fonksiyona armancê an rehetkirina hin astengan de be. Dema ku karê wê bi sînor be dîtin an kirin ev dijwar e. Ji ber ku zanyarek teknîkî di xweşbînkirina algorîtmayan de pispor e, ew pir kêmtir dibe ku tiştek din bike, her çend ew feydeyên girîng jî bîne.
Navê nîşanên ku dema ku tîmên zanistiya daneyê wekî kargehên pin tevdigerin xuya dibin (mînak, di nûvekirinên statûya hêsan de): "li benda guherînên lûleya daneyê" û "li benda çavkaniyên ML Eng" astengkerên hevpar in. Lêbelê, ez bawer dikim ku bandora xeternak ew e ku hûn pê nahesin, ji ber ku hûn nekarin ji tiştê ku hûn berê nizanin poşman bibin. Pêkanîna bêkêmasî û dilrehetiya ku ji bidestxistina karbidestiya pêvajoyê hatî peyda kirin dikare rastiyê veşêre ku rêxistin ji feydeyên perwerdehiyê yên ku ew winda dikin nizanin.
Çareseriya vê pirsgirêkê, bê guman, ew e ku meriv ji rêbaza pînê ya fabrîkî xilas bibe. Ji bo teşwîqkirina fêrbûn û dubarekirinê, divê rolên zanyarê daneyê gelemperî be lê bi berpirsiyariyên berfireh ji fonksiyona teknîkî serbixwe bin, ango zanyarên daneyê birêxistin bikin da ku ew ji bo fêrbûnê xweşbîn bibin. Ev tê vê wateyê ku "pisporên stûyê tam" - pisporên gelemperî ku dikarin fonksiyonên cihêreng bikin, ji têgînê bigire heya modelkirinê, bicîhkirinê heya pîvandinê. Girîng e ku were zanîn ku ez pêşniyar nakim ku karkirina jêhatîbûna tev-stack divê hejmara karmendan kêm bike. Berevajî vê, ez ê tenê texmîn bikim ku gava ku ew bi rengek cûda têne organîze kirin, teşwîqên wan bi feydeyên fêrbûn û performansê re çêtir têne hev kirin. Mînakî, em bibêjin tîmek we ji sê kesan pêk tê ku sê jêhatîbûna karsaziyê heye. Di kargehek pin de, her teknîsyen dê sêyeka dema xwe ji her karekî re veqetîne, ji ber ku kesek din nikare karê xwe bike. Di stûnek bêkêmasî de, her generalist bi tevahî ji bo tevahiya pêvajoya karsaziyê, mezinbûn, û perwerdehiyê ve girêdayî ye.
Ji ber ku hindik kes piştgirî didin çerxa hilberînê, hevrêzî kêm dibe. Generalist di navbera taybetmendiyan de bi rêkûpêk tevdigere, lûleya daneyê berfireh dike da ku bêtir daneyan zêde bike, taybetmendiyên nû di modelan de biceribîne, guhertoyên nû ji hilberînê re ji bo pîvandinên sedemî bicîh dike, û gavan bi lez gava ku ramanên nû derdikevin dubare dike. Bê guman, vagona stasyonê fonksiyonên cihêreng bi rêz û ne paralel pêk tîne. Beriya her tiştî, ew tenê yek kes e. Lêbelê, temamkirina peywirek bi gelemperî tenê beşek ji wextê ku ji bo gihîştina çavkaniyek pisporek din hewce dike digire. Ji ber vê yekê, dema dubarekirinê kêm dibe.
Dibe ku generalîstê me di fonksiyonek karek taybetî de wekî pisporek jêhatî nebe, lê em ji bo kamilbûna fonksiyonel an çêtirkirinên piçûktir ên piçûk hewl nadin. Berevajî vê, em hewl didin ku bi bandora gav bi gav bêtir û bêtir pirsgirêkên profesyonel fêr bibin û kifş bikin. Bi çarçoveyek yekgirtî ya ji bo çareseriyek bêkêmasî, ew fersendên ku pispor dê winda bike dibîne. Zêdetir fikr û îmkanên wî hene. Ew jî têk diçe. Lêbelê, lêçûna têkçûnê kêm e û feydeyên fêrbûnê zêde ne. Ev asimetrî dubarekirina bilez pêş dixe û fêrbûnê xelat dike.
Girîng e ku were zanîn ku mîqdara xweserî û cihêrengiya jêhatîbûnê ya ku ji zanyarên stûnê re tê peyda kirin bi giranî bi zexmbûna platforma daneyê ya ku li ser bixebite ve girêdayî ye. Platformek daneyê ya baş-sêwirandî zanyarên daneyê ji tevliheviyên konteyneran, pêvajoyek belavkirî, têkçûna otomatîkî, û têgehên din ên pêşkeftî yên pêşkeftî vediqetîne. Digel abstractionê, platformek daneya zexm dikare pêwendiyek bêkêmasî bi binesaziya ceribandinê re peyda bike, çavdêrîkirin û hişyarkirinê bixweber bike, pîvandin û dîtina otomatîkî ya encamên algorîtmîkî û xeletkirinê bike. Van pêkhateyan ji hêla endezyarên platforma daneyê ve têne sêwirandin û çêkirin, tê vê wateyê ku ew ji zanyarê daneyê derbasî tîmê pêşkeftina platforma daneyê nayên kirin. Ew pisporê Zanistiya Daneyê ye ku ji hemî kodên ku ji bo xebitandina platformê têne bikar anîn berpirsiyar e.
Ez jî, carek bi karanîna karbidestiya pêvajoyê bi dabeşkirina fonksiyonel a kar re eleqedar bûm, lê bi ceribandin û xeletiyê (rêyek çêtir a fêrbûnê tune), min kifş kir ku rolên tîpîk hînbûn û nûjeniyê hêsantir dike û metrîkên rast peyda dike: keşfkirin û avakirina gelek derfetên karsaziyê ji nêzîkatiya pispor. (Rêyek bi bandortir ji bo fêrbûna vê nêzîkatiya birêxistinkirinê ji ceribandin û xeletiya ku ez tê de derbas bûm xwendina pirtûka Amy Edmondson Team Hevkariya: Rêxistin Çawa Di Aboriya Zanînê de Fêr Dibin, Nûvekirin û Pêşbaziyê Dikin).
Hin texmînên girîng hene ku dibe ku ev nêzîkatî di hin pargîdaniyan de organîzekirina kêm-zêde pêbawer bike. Pêvajoya dubarekirinê lêçûna ceribandin û xeletiyê kêm dike. Ger lêçûna xeletiyê zêde ye, dibe ku hûn bixwazin wan kêm bikin (lê ev ji bo serîlêdanên bijîjkî an çêkirinê nayê pêşniyar kirin). Wekî din, heke hûn bi petabytes an exabytes daneyan re mijûl dibin, dibe ku pisporiya di endezyariya daneyê de hewce be. Di heman demê de, heke domandina kapasîteyên karsaziya serhêl û hebûna wan ji baştirkirina wan girîngtir e, dibe ku pêşkeftina fonksiyonel fêrbûnê bişkîne. Di dawiyê de, modela stackê ya tevahî xwe dispêre nerînên mirovên ku di derbarê wê de dizanin. Ew ne yekqir in; hûn dikarin wan bibînin an jî xwe amade bikin. Lêbelê, ew daxwazek mezin in û kişandin û girtina wan dê tezmînata pêşbaziyê, nirxên pargîdanî yên bihêz û xebata dijwar hewce bike. Bawer bikin ku çanda pargîdaniya we dikare vê piştgirî bike.
Tewra digel van hemî gotinan, ez bawer dikim ku modela stackê ya tevahî şertên destpêkê çêtirîn peyda dike. Bi wan re dest pê bikin, û dûv re bi hişmendî tenê gava ku bêkêmasî hewce be berbi dabeşkirina karûbarê fonksiyonel ve biçin.
Dezawantajên din ên pisporiya fonksiyonel hene. Ev dibe sedema windakirina berpirsiyarî û pasîfbûna karkeran. Smith bi xwe dabeşkirina kar rexne dike, pêşniyar dike ku ew dibe sedema qutbûna jêhatîbûnê, ango. karker ji ber ku rolên wan bi çend karên dubarekirî re sînordar in, nezan dibin û vedikişin. Digel ku pisporî dibe ku karbidestiya pêvajoyê peyda bike, ew hindik e ku xebatkaran teşwîq bike.
Di encamê de, rolên piralî hemî tiştên ku dilxweşiya kar peyda dikin peyda dikin: xweserî, serwerî û armanc. Xweserî ew e ku ji bo bidestxistina serkeftinê bi tiştekî ve girêdayî ne. Serwerî di avantajên pêşbaziyê yên bihêz de ye. Û hesta armancê di derfetê de ye ku bandorek li ser karsaziya ku ew diafirînin. Ger em karibin mirovan bi karê xwe bi heyecan bikin û bandorek mezin li ser pargîdaniyê bikin, wê hingê her tiştê din dê bi cîh bibe.
Source: www.habr.com