Atụmatụ ọkwa maka inweta ọrụ injinia data

N'ime afọ asatọ gara aga, anọ m na-arụ ọrụ dị ka onye njikwa ọrụ (anaghị m ede koodu na-arụ ọrụ), nke na-emetụta n'ụzọ na-adịghị mma m azụ azụ teknụzụ. Ekpebiri m imechi oghere teknụzụ m wee nweta ọrụ nke injinia data. Isi nka nke onye injinia data bụ ikike imepụta, wuo na idobe ụlọ nkwakọba ihe data.

Emere m atụmatụ ọzụzụ, echere m na ọ ga-aba uru ọ bụghị naanị maka m. Atụmatụ a lekwasịrị anya na nkuzi ọmụmụ onwe onye. A na-ebute ihe ọmụmụ n'efu na Russian ụzọ.

Ngalaba:

• Algorithms na usoro data. Akụkụ igodo. Mụta ya na ihe ọ bụla ọzọ ga-arụkwa ọrụ. Ọ dị mkpa iji nweta aka gị na koodu ahụ ma jiri usoro ntọala na algọridim.
• Ebe nchekwa data na ụlọ nkwakọba ihe data, ọgụgụ isi azụmahịa. Anyị na-aga site na algọridim na nchekwa data na nhazi.
• Hadoop na nnukwu data. Mgbe nchekwa data adịghị etinye na draịvụ ike, ma ọ bụ mgbe achọrọ nyocha data, mana Excel enweghịzi ike ibu ha, nnukwu data na-amalite. N'uche nke m, ọ dị mkpa ịga n'ihu na ngalaba a naanị mgbe nyochachara miri emi nke abụọ gara aga.

Algorithms na usoro data

N'ime atụmatụ m, etinyere m ịmụ Python, na-ekwughachi ihe ndabere nke mgbakọ na mwepụ na algọridimization.

• Mmemme na Python
• Python: Basics na ngwa
• Linear algebra
• Likbez na mgbakọ na mwepụ pụrụ iche
• Algorithms: tiori na omume. Ụzọ
• Algorithms: tiori na omume. Ọdịdị data

Ebe nchekwa data na ụlọ nkwakọba ihe data, ọgụgụ isi azụmahịa

• Akwukwo: Martin Kleppman - Ngwa juru eju. Mmemme, scaling, nkwado. Akwụkwọ ahụ na-akọwa otú ụdị data dị iche iche si arụ ọrụ, mmejuputa ha site n'ime, njedebe na nhọrọ dabere na ọrụ ahụ.
• Okwu mmalite nke ọdụ data
• Banye n'ime DBMS
• Okwu mmalite nke ọdụ data na-abụghị mmekọrịta

Isiokwu ndị metụtara iwu ụlọ nkwakọba ihe data, ETL, OLAP cubes na-adabere na ngwaọrụ, yabụ anaghị m enye njikọ na nkuzi na akwụkwọ a. Ọ bụ ihe amamihe dị na ya ịmụ usoro ndị dị otú ahụ mgbe ị na-arụ ọrụ na otu ọrụ na otu ụlọ ọrụ. Maka ịmara ETL, ị nwere ike ịnwale Akụkọ ma ọ bụ Ofufe ikuku.

N'uche nke m, ọ dị mkpa ịmụ usoro nhazi data Vault ọgbara ọhụrụ njikọ 1, njikọ 2. Ụzọ kacha mma isi mụta ya bụ iwere ya ma jiri ihe atụ dị mfe mejuputa ya. Enwere ọtụtụ ihe atụ mmejuputa data Vault na GitHub ngalaba. Akwụkwọ nkwakọba ihe data ọgbara ọhụrụ: Ijikwa data Vault nke Agile Data nke Hans Hultgren mere.

Iji mata ngwa ọgụgụ isi azụmaahịa maka ndị ọrụ njedebe, ị nwere ike iji onye nrụpụta akụkọ n'efu, bọọdụ dashboard, obere ụlọ nkwakọba ihe data Power BI Desktop. Ihe nkuzi: njikọ 1, njikọ 2.

Hadoop na nnukwu data

• Ịkwesịrị ịmalite site na mmejuputa MapReduce kwụụrụ onwe ya na-enweghị ọba akwụkwọ ndị ọzọ. Nke a ga-enye ohere maka nghọta ka mma nke mmejuputa multithreaded n'ọdịnihu. A kọwara ezigbo ihe atụ na Python ebe a.
• Hadoop. Sistemu maka ịhazi nnukwu data.
• Okwu Mmalite nke Big Data Engineering

nkwubi

Ọ bụghị ihe niile ị mụtara nwere ike itinye n'ọrụ. Ya mere, ịchọrọ ọrụ ngụsị akwụkwọ nke ị ga-agbalị itinye ihe ọmụma ọhụrụ.

Enweghị isiokwu metụtara nyocha data na mmụta igwe na atụmatụ ahụ. nke a na-emetụta ọrụ ndị ọkà mmụta sayensị data. Enweghịkwa isiokwu metụtara igwe ojii AWS, Azure. isiokwu ndị a dabere na nhọrọ nke ikpo okwu.

Ajụjụ ndị obodo:
Kedu ka atụmatụ nhazi m siri zuo oke? Kedu ihe ị ga-ewepụ ma ọ bụ tinye?
Kedu ọrụ ị ga-akwado dị ka tesis?

isi: www.habr.com