පසුගිය වසර අට තුළ මම ව්‍යාපෘති කළමනාකරුවෙකු ලෙස සේවය කර ඇත (මම රැකියාවේදී කේතය ලියන්නේ නැත), එය ස්වභාවිකවම මගේ තාක්ෂණික පසුබිමට අහිතකර ලෙස බලපායි. මම මගේ තාක්ෂණික පරතරය වසා දමා දත්ත ඉංජිනේරු වෘත්තිය ලබා ගැනීමට තීරණය කළෙමි. දත්ත ඉංජිනේරුවෙකුගේ මූලික කුසලතාව වන්නේ දත්ත ගබඩා සැලසුම් කිරීමට, ගොඩනැගීමට සහ නඩත්තු කිරීමට ඇති හැකියාවයි.
මම පුහුණු සැලැස්මක් හැදුවා, එය මට පමණක් නොව ප්‍රයෝජනවත් වනු ඇතැයි මම සිතමි. සැලැස්ම ස්වයං අධ්‍යයන පාඨමාලා කෙරෙහි අවධානය යොමු කර ඇත. රුසියානු භාෂාවෙන් නොමිලේ පාඨමාලා සඳහා ප්රමුඛත්වය දෙනු ලැබේ.
කොටස්:
- ඇල්ගොරිතම සහ දත්ත ව්යුහයන්. ප්රධාන කොටස. එය ඉගෙන ගන්න, අනෙක් සියල්ල සාර්ථක වනු ඇත. කේතය මත ඔබේ දෑත් ලබා ගැනීම සහ මූලික ව්යුහයන් සහ ඇල්ගොරිතම භාවිතා කිරීම වැදගත් වේ.
- දත්ත සමුදායන් සහ දත්ත ගබඩා, ව්‍යාපාරික බුද්ධිය. අපි ඇල්ගොරිතම වලින් දත්ත ගබඩා කිරීම සහ සැකසීම වෙත ගමන් කරමින් සිටිමු.
- Hadoop සහ Big Data. දත්ත සමුදාය දෘඪ තැටියේ ඇතුළත් කර නොමැති විට හෝ දත්ත විශ්ලේෂණය කිරීමට අවශ්ය වූ විට, නමුත් Excel හට තවදුරටත් ඒවා පැටවිය නොහැකි විට, විශාල දත්ත ආරම්භ වේ. මගේ මතය අනුව, මෙම කොටස වෙත යාමට අවශ්ය වන්නේ පෙර ඒවා දෙක ගැඹුරින් අධ්යයනය කිරීමෙන් පසුවය.
ඇල්ගොරිතම සහ දත්ත ව්යුහයන්
මගේ සැලැස්ම තුළ, මම පයිතන් ඉගෙනීම, ගණිතය සහ ඇල්ගොරිතමකරණය පිළිබඳ මූලික කරුණු පුනරුච්චාරණය කිරීම ඇතුළත් කළෙමි.
දත්ත සමුදායන් සහ දත්ත ගබඩා, ව්‍යාපාරික බුද්ධිය
- පොත: මාටින් ක්ලෙප්මන් - අධික ලෙස පටවා ඇති යෙදුම්. වැඩසටහන්කරණය, පරිමාණය, සහාය. විවිධ දත්ත ආකෘති ක්‍රියා කරන ආකාරය, ඇතුළත සිට ක්රියාත්මක කිරීම, සීමාවන් සහ කාර්යය අනුව තේරීම් පොත විස්තර කරයි.
දත්ත ගබඩා ගොඩනැගීමට අදාළ මාතෘකා, ETL, OLAP කැට මෙවලම් මත බෙහෙවින් රඳා පවතී, එබැවින් මම මෙම ලේඛනයේ පාඨමාලා සඳහා සබැඳි ලබා නොදේ. නිශ්චිත සමාගමක නිශ්චිත ව්යාපෘතියක් මත වැඩ කරන විට එවැනි පද්ධති අධ්යයනය කිරීම යෝග්ය වේ. ETL සමඟ දැන හඳුනා ගැනීම සඳහා, ඔබට උත්සාහ කළ හැකිය හෝ .
මගේ මතය අනුව, නවීන Data Vault සැලසුම් ක්‍රමවේදය අධ්යයනය කිරීම වැදගත් වේ , . එය ඉගෙන ගැනීමට ඇති හොඳම ක්‍රමය නම් එය සරල උදාහරණයකින් ගෙන එය ක්රියාත්මක කිරීමයි. GitHub මත Data Vault ක්රියාත්මක කිරීමේ උදාහරණ කිහිපයක් තිබේ . නවීන දත්ත ගබඩා පොත: හාන්ස් හල්ට්ග්‍රෙන් විසින් දත්ත ගබඩාව සමඟ වේගවත් දත්ත ගබඩාව ආකෘතිකරණය කිරීම.
අවසාන පරිශීලකයින් සඳහා ව්‍යාපාර බුද්ධි මෙවලම් සමඟ දැන හඳුනා ගැනීම සඳහා, ඔබට වාර්තා, උපකරණ පුවරු, කුඩා දත්ත ගබඩා Power BI ඩෙස්ක්ටොප් නොමිලේ නිර්මාණකරු භාවිතා කළ හැකිය. අධ්යාපනික ද්රව්ය: , .
Hadoop සහ Big Data
- ඔබ තෙවන පාර්ශ්ව පුස්තකාල නොමැතිව MapReduce ස්වාධීනව ක්රියාත්මක කිරීමකින් ආරම්භ කළ යුතුය. මෙය අනාගතයේදී බහු නූල් ක්රියාත්මක කිරීම් පිළිබඳ වඩා හොඳ අවබෝධයක් ලබා ගැනීමට ඉඩ සලසයි. Python හි විශිෂ්ට උදාහරණයක් විස්තර කෙරේ .
නිගමනය
ඔබ ඉගෙන ගන්නා සෑම දෙයක්ම රැකියාවේදී යෙදිය නොහැක. එමනිසා, ඔබට නව දැනුම යෙදීමට උත්සාහ කරන උපාධි ව්යාපෘතියක් අවශ්ය වේ.
සැලැස්ම තුළ දත්ත විශ්ලේෂණය සහ යන්ත්‍ර ඉගෙනීම සම්බන්ධ මාතෘකා නොමැත. මෙය Data Scientist වෘත්තියට වඩාත් අදාළ වේ. AWS clouds, Azure සම්බන්ධ මාතෘකා ද නොමැත. මෙම තේමාවන් වේදිකාව තෝරාගැනීම මත බෙහෙවින් රඳා පවතී.
ප්‍රජාවට ප්‍රශ්න:
මගේ මට්ටම් කිරීමේ සැලැස්ම කෙතරම් ප්‍රමාණවත්ද? ඉවත් කිරීමට හෝ එකතු කිරීමට කුමක් කළ යුතුද?
ඔබ නිබන්ධනයක් ලෙස නිර්දේශ කරන ව්‍යාපෘතිය කුමක්ද?
මූලාශ්රය: www.habr.com