Cynllun lefelu ar gyfer cael y proffesiwn Peiriannydd data

Rwyf wedi bod yn gweithio fel rheolwr prosiect am yr wyth mlynedd diwethaf (nid wyf yn ysgrifennu cod yn y gwaith), sy'n naturiol yn cael effaith negyddol ar fy nghefn technoleg. Penderfynais leihau fy mwlch technolegol a chael y proffesiwn peiriannydd Data. Prif sgil peiriannydd Data yw'r gallu i ddylunio, adeiladu a chynnal warysau data.

Rwyf wedi llunio cynllun hyfforddi, rwy'n meddwl y bydd yn ddefnyddiol nid yn unig i mi. Mae'r cynllun yn canolbwyntio ar astudiaeth annibynnol o gyrsiau. Rhoddir blaenoriaeth i gyrsiau rhad ac am ddim yn Rwsieg.

Adrannau:

• Algorithmau a strwythurau data. Adran allweddol. Os byddwch yn ei astudio, bydd popeth arall yn gweithio allan hefyd. Mae'n bwysig dod yn hyddysg mewn ysgrifennu cod a defnyddio strwythurau ac algorithmau sylfaenol.
• Cronfeydd data a warysau data, Gwybodaeth Busnes. Symudwn o algorithmau i storio a phrosesu data.
• Hadoop a Data Mawr. Pan nad yw'r gronfa ddata yn ffitio ar y gyriant caled, neu pan fydd angen dadansoddi'r data, ond na all Excel ei lwytho mwyach, mae data mawr yn dechrau. Yn fy marn i, dim ond ar ôl astudiaeth fanwl o'r ddau flaenorol y mae angen i chi symud ymlaen i'r adran hon.

Algorithmau a strwythurau data

Yn fy nghynllun cynhwysais ddysgu Python, adolygu hanfodion mathemateg ac algorithmeiddio.

• Rhaglennu Python
• Python: Hanfodion a Cheisiadau
• Algebra llinol
• Likbez ar fathemateg arwahanol
• Algorithmau: theori ac ymarfer. Dulliau
• Algorithmau: theori ac ymarfer. Strwythurau Data

Cronfeydd data a warysau data, Gwybodaeth Busnes

• Llyfr: Martin Kleppmann - Cymwysiadau llwyth uchel. Rhaglennu, graddio, cefnogaeth. Mae'r llyfr yn disgrifio sut mae modelau data gwahanol yn gweithio, eu gweithrediad o'r tu mewn, cyfyngiadau a dewisiadau yn dibynnu ar y dasg.
• Cyflwyniad i gronfeydd data
• Plymiwch i mewn i'r DBMS
• Cyflwyniad i Gronfeydd Data Amherthnasol

Mae pynciau sy'n ymwneud ag adeiladu warysau data, ETL, ciwbiau OLAP yn ddibynnol iawn ar yr offer, felly yn y ddogfen hon nid wyf yn darparu dolenni i gyrsiau. Mae'n ddoeth astudio systemau o'r fath wrth weithio ar brosiect penodol mewn cwmni penodol. Ar gyfer adnabyddiaeth o ETL, gallwch geisio Talend neu Llif aer.

Yn fy marn i, mae'n bwysig astudio methodoleg dylunio warws data modern Data Vault dolen 1, dolen 2. A'r ffordd orau i'w ddysgu yw ei gymryd a'i weithredu gydag enghraifft syml. Mae yna sawl enghraifft o weithredu Data Vault ar GitHub cyswllt. Y Llyfr Warws Data Modern: Modelu'r Warws Data Ystwyth gyda Data Vault gan Hans Hultgren.

I ddod yn gyfarwydd ag offer Cudd-wybodaeth Busnes ar gyfer defnyddwyr terfynol, gallwch ddefnyddio'r dylunydd adroddiadau am ddim, dangosfyrddau, a warysau data mini Power BI Desktop. Deunyddiau addysgol: dolen 1, dolen 2.

Hadoop a Data Mawr

• Mae angen i chi ddechrau gyda gweithrediad annibynnol MapReduce heb lyfrgelloedd trydydd parti. Bydd hyn yn caniatáu gwell dealltwriaeth o weithrediadau aml-linyn yn y dyfodol. Disgrifir enghraifft wych yn Python yma.
• Hadoop. System ar gyfer prosesu symiau mawr o ddata.
• Cyflwyniad i Beirianneg Data Mawr

Casgliad

Ni ellir cymhwyso popeth a ddysgwch yn y gwaith. Felly, mae angen prosiect graddio arnoch lle byddwch chi'n ceisio cymhwyso gwybodaeth newydd.

Nid yw'r cynllun yn cynnwys pynciau sy'n ymwneud â dadansoddi data a Dysgu Peiriant, oherwydd mae hyn yn fwy perthnasol i'r proffesiwn Gwyddonydd Data. Nid oes unrhyw bynciau hefyd yn ymwneud â chymylau AWS ac Azure. mae'r pynciau hyn yn ddibynnol iawn ar y dewis o lwyfan.

Cwestiynau i'r gymuned:
Pa mor ddigonol yw fy nghynllun lefelu? Beth i'w ddileu neu ychwanegu?
Pa brosiect fyddech chi'n ei argymell fel thesis?

Ffynhonnell: hab.com