Yandex Resident Program, po'o le Fa'afefea ona Avea se Fa'ata'ita'i Fa'apitoa e Avea ma Inisinia ML

O loʻo tatalaina e Yandex se polokalame nofomau i le aʻoaʻoina o masini mo tagata atinaʻe i tua. Afai na e tusia ni mea se tele i le C++/Python ma e te manaʻo e faʻaoga lenei malamalama i le ML, ona matou aʻoaʻoina lea o oe ile auala e fai ai suʻesuʻega faʻatino ma tuʻuina atu ni faufautua faʻapitoa. O le ae galue i luga o auaunaga autu Yandex ma maua tomai i vaega e pei o laina laina ma le faʻaleleia o le gradient, faiga faʻatonuga, neural networks mo le suʻeina o ata, tusitusiga ma leo. O le a e a'oa'oina fo'i pe fa'afefea ona iloilo lelei au fa'ata'ita'iga e fa'aoga ai fua fa'atatau i luga ole laiga ma luga ole laiga.

O le umi o le polokalame e tasi le tausaga, lea o le a galulue ai tagata auai i le masini atamai ma suʻesuʻega matagaluega a Yandex, faʻapea foʻi ma le auai i lauga ma semina. E totogi le auai ma e aofia ai galuega tumau: 40 itula i le vaiaso, amata ia Iulai 1 o lenei tausaga. Ua tatala nei talosaga ma o le a tumau seia oo i le aso 1 o Me. 

Ma i le taimi nei i nisi auiliiliga - e uiga i le ituaiga o aofia o loʻo matou faʻatali i ai, o le a le galuega o le ai ai ma, i se tulaga lautele, pe faʻafefea ona sui se tagata tomai faʻapitoa i tua i se matata i le ML.

Taʻitaʻiga

Tele kamupani o lo'o iai Polokalama nofomau, e aofia ai, mo se fa'ata'ita'iga, Google ma Facebook. O lo'o fa'atatau tonu i tagata tomai fa'apitoa laiti ma le vaeluagalemu o lo'o taumafai e faia se la'asaga aga'i i su'esu'ega ML. O la matou polokalame e mo se aofia eseese. Matou te valaʻaulia le au atinaʻe pito i tua ua uma ona maua le poto masani ma iloa mautinoa o latou agavaa e manaʻomia ona sui agai i le ML, e maua ai tomai faʻapitoa - ae le o tomai o se saienitisi - i le foia o faʻafitauli tau aʻoaʻoga masini. E le o lona uiga tatou te le lagolagoina talavou suʻesuʻe. Ua matou faatulagaina se polokalame ese mo i latou - taui faaigoa ia Ilya Segalovich, lea e mafai ai foi ona e galue i Yandex.

O fea o le a galue ai le tagata nofomau?

I totonu o le Matagaluega o masini atamai ma suʻesuʻega, matou te faʻatupuina manatu faʻatino. O le puna autu o musumusuga o tusitusiga faasaienisi, tala, ma aga i totonu o le sosaiete suʻesuʻe. Matou te suʻesuʻeina ma aʻu uo mea matou te faitau i ai, vaʻavaʻai pe faʻafefea ona matou faʻaleleia pe faʻalauteleina metotia na faʻatulagaina e saienitisi. I le taimi lava e tasi, e tofu i tatou ma le mafaufau i lana lava vaega o le poto ma mea e fiafia i ai, faʻatulagaina le galuega e faʻavae i luga o vaega na te manatu e taua. O le manatu mo se poloketi e masani lava ona fanau mai i le vaeluaga o taunuʻuga o suʻesuʻega i fafo ma lona lava agavaa.

O lenei faiga e lelei ona e tele lava ina foia faafitauli faatekinolosi o auaunaga Yandex e tusa lava pe latou te leʻi tulaʻi mai. Pe a feagai se auaunaga ma se faʻafitauli, o ona sui e o mai ia i matou, e foliga mai e faʻaaogaina tekinolosi ua uma ona matou saunia, o mea uma e totoe o le faʻaoga saʻo i le oloa. Afai e le o saunia se mea, o le a vave ona tatou manatua le mea e mafai ona tatou "amata eli" ma pe o fea tusiga e suʻe ai se fofo. E pei ona tatou iloa, o le faiga faasaienisi o le tu i luga o tauau o tagata tinoeese.

O le a le mea e fai

I Yandex - ma e oʻo lava i la matou pulega - o vaega uma o le ML o loʻo atiaʻe. O la matou sini o le faʻaleleia o le lelei o le tele o ituaiga o oloa, ma e avea lea ma faʻamalosi e faʻataʻitaʻi mea fou uma. E le gata i lea, o auaunaga fou e aliali mai e le aunoa. O lea la o le polokalame lauga e aofia uma ai vaega autu (faʻamaonia lelei) o le aʻoaʻoina o masini i le atinaʻeina o alamanuia. I le tuufaatasia o laʻu vaega o le vasega, sa ou faʻaaogaina loʻu poto masani faʻafaiaoga i le School of Data Analysis, faʻapea foʻi ma meafaitino ma galuega a isi faiaoga SHAD. Ou te iloa sa faapena foi ona faia e a'u uo.

I masina muamua, o aʻoaʻoga e tusa ai ma le polokalame aʻoaʻoga e tusa ma le 30% o lou taimi faigaluega, ona tusa lea ma le 10%. Ae ui i lea, e taua le malamalama o le galulue faʻatasi ma faʻataʻitaʻiga ML lava ia o le a faʻaauau pea ona faʻaalu pe tusa ma le fa taimi le itiiti ifo nai lo faiga uma e fesoʻotaʻi. O nei mea e aofia ai le saunia o le pito i tua, mauaina o faʻamatalaga, tusiaina o se paipa mo le muaʻi faʻaaogaina, faʻaogaina code, fetuutuunai i meafaigaluega faʻapitoa, ma isi. O le inisinia ML, pe a e fiafia i ai, o se tagata faʻapipiʻi atoa (naʻo le faʻamamafa sili atu i le aʻoaʻoina o masini). , mafai ona foia se faafitauli mai le amataga seia maeʻa. E oʻo lava i se faʻataʻitaʻiga ua saunia, atonu o le a manaʻomia ona e faia le tele o isi gaioiga: faʻatusatusa lona faʻatinoga i le tele o masini, saunia se faʻatinoga i le tulaga o se au, se faletusi, poʻo vaega o le auaunaga lava ia.

Filifiliga a le tamaititi aoga
Afai na e i ai i lalo o le manatu e sili atu le avea ma se inisinia ML e ala i le galue muamua o se atinaʻe i tua, e le saʻo lea. Le lesitalaina i le ShAD lava e tasi e aunoa ma se poto masani i le atinaʻeina o auaunaga, aʻoaʻoina ma faʻateleina le manaʻomia i luga o le maketi o se filifiliga sili ona lelei. O le tele o tagata tomai faapitoa i Yandex na iu i o latou tulaga oi ai nei i lenei auala. Afai ei ai se kamupani ua sauni e ofo atu ia te oe se galuega i le matata o le ML i le taimi lava e maeʻa ai le faauuga, e tatau ona e talia foi le ofo. Taumafai e ulufale i se 'au lelei ma se faufautua poto ma sauni e aʻoaʻo ni mea se tele.

O le a le mea e masani ona taofia oe mai le faia o le ML?

Afai e mana'o se tagata tua e avea ma inisinia ML, e mafai ona ia filifili mai vaega e lua o le atina'e - e aunoa ma le amanaia o le polokalame nofomau.

Muamua, suʻesuʻe o se vaega o nisi vasega faʻaleaʻoaʻoga. Lesona Coursera o le a faʻalatalata atili oe i le malamalama i metotia faʻavae, ae ia faʻatofu oe lava i le galuega i se tulaga talafeagai, e tatau ona e tuʻuina atu le tele o le taimi i ai. Mo se faʻataʻitaʻiga, faʻauʻu mai le ShAD. I le gasologa o tausaga, e ese le numera o vasega a le ShAD i luga o le aʻoaʻoga masini - i le averesi, e tusa ma le valu. O i latou uma e taua tele ma aoga, e aofia ai i le manatu o le au faauu. 

Lona lua, e mafai ona e 'auai i galuega taua e te manaʻomia e faʻatino ai se tasi poʻo se isi ML algorithm. Ae ui i lea, e toʻaitiiti lava ia poloketi i luga o le maketi atinaʻe IT: e le faʻaaogaina masini aʻoaʻoga i le tele o galuega. E oo lava i faletupe o loʻo suʻesuʻeina ma le malosi avanoa e fesoʻotaʻi ma ML, e naʻo ni nai tagata o loʻo galulue i suʻesuʻega faʻamaumauga. Afai e le mafai ona e auai i se tasi o nei 'au, na o lau filifiliga o le amataina o lau lava poloketi (lea, e foliga mai, e te setiina au lava taimi e gata ai, ma e itiiti se mea e fai i galuega o le gaosiga o taua), pe amata ona tauva i luga. Kaggle.

Ioe, faʻatasi ma isi tagata o le nuʻu ma faʻataʻitaʻi oe i tauvaga fai si faigofie - aemaise lava pe afai e te lagolagoina ou tomai i toleniga ma vasega o loʻo taʻua i luga ole Coursera. O tauvaga ta'itasi e iai le taimi e gata ai - o le a avea ma fa'aosofiaga mo oe ma saunia oe mo se faiga fa'apena i kamupani IT. O se auala lelei lea - e ui i lea, e teteʻa laʻititi mai faiga moni. I luga o Kaggle e tuʻuina atu ia te oe le faʻatulagaina muamua, e ui lava e le o taimi uma e atoatoa, faʻamaumauga; aua le ofoina atu e mafaufau e uiga i le sao i le oloa; ma sili ona taua, latou te le manaʻomia ni fofo talafeagai mo le gaosiga. O au algorithms atonu o le a aoga ma sili ona saʻo, ae o au faʻataʻitaʻiga ma code o le a pei o Frankenstein faʻapipiʻi faʻatasi mai vaega eseese - i se galuega gaosiga, o le fausaga atoa o le a galue lemu, o le a faigata ona faʻafouina ma faʻalautele (mo se faʻataʻitaʻiga, gagana ma leo algorithms e masani lava ona toe tusia se vaega a'o tuputupu ae le gagana). Kamupani e fiafia i le mea moni o le galuega o loʻo lisiina e mafai ona faia e le gata ia oe lava (e manino lava o oe, o le tusitala o le fofo, e mafai ona faia lenei mea), ae faʻapea foʻi ma soʻo se tasi o au paaga. O loʻo talanoaina le eseesega i le va o taʻaloga ma polokalame faʻapisinisi много, ma Kaggle e aʻoaʻoina tonu "tagata taʻalo" - tusa lava pe lelei tele, faʻatagaina i latou e maua se poto masani.

Na ou faamatalaina ni laina se lua o atinae - aoaoga e ala i polokalame faaleaoaoga ma aoaoga "i le taua", mo se faataitaiga i luga o Kaggle. O le polokalame nofomau o se tuufaatasiga o nei auala e lua. O lauga ma semina i le tulaga o le ShAD, faʻapea foʻi ma faʻataʻitaʻiga moni, o loʻo faʻatali mo oe.

puna: www.habr.com