So'nggi sakkiz yil davomida men loyiha menejeri bo'lib ishlayapman (men ish joyida kod yozmayman), bu mening texnologik ishimga salbiy ta'sir qiladi. Men texnologik bo'shliqni yopishga va ma'lumotlar muhandisi kasbini olishga qaror qildim. Ma'lumotlar muhandisining asosiy mahorati ma'lumotlar omborlarini loyihalash, qurish va saqlash qobiliyatidir.
Men mashg'ulot rejasini tuzdim, bu nafaqat men uchun foydali bo'ladi deb o'ylayman. Reja mustaqil ta'lim kurslariga qaratilgan. Rus tilidagi bepul kurslarga ustunlik beriladi.
Bo'limlar:
- Algoritmlar va ma'lumotlar tuzilmalari. Asosiy bo'lim. Buni o'rganing va hamma narsa ishlaydi. Kod bilan tanishish va asosiy tuzilmalar va algoritmlardan foydalanish muhimdir.
- Ma'lumotlar bazalari va ma'lumotlar omborlari, Business Intelligence. Biz algoritmlardan ma'lumotlarni saqlash va qayta ishlashga o'tmoqdamiz.
- Hadoop va Big Data. Ma'lumotlar bazasi qattiq diskka kiritilmaganda yoki ma'lumotlarni tahlil qilish kerak bo'lganda, lekin Excel ularni endi yuklay olmasa, katta hajmdagi ma'lumotlar boshlanadi. Menimcha, oldingi ikkitasini chuqur o'rganib chiqqandan keyingina ushbu bo'limga o'tish kerak.
Algoritmlar va ma'lumotlar tuzilmalari
Men o'z rejamga Python tilini o'rganishni, matematika va algoritmlash asoslarini takrorlashni kiritdim.
Ma'lumotlar bazalari va ma'lumotlar omborlari, Business Intelligence
- Kitob: Martin Kleppman - Yuqori yuklangan ilovalar. Dasturlash, masshtablash, qo'llab-quvvatlash. Kitobda turli xil ma'lumotlar modellari qanday ishlashi, ularni ichkaridan amalga oshirish, vazifaga qarab cheklovlar va tanlovlar tasvirlangan.
Ma'lumotlar omborlari, ETL, OLAP kublarini qurish bilan bog'liq mavzular asboblarga juda bog'liq, shuning uchun men ushbu hujjatdagi kurslarga havola bermayman. Muayyan kompaniyada muayyan loyiha ustida ishlashda bunday tizimlarni o'rganish tavsiya etiladi. ETL bilan tanishish uchun siz sinab ko'rishingiz mumkin yoki .
Mening fikrimcha, zamonaviy Data Vault dizayn metodologiyasini o'rganish muhimdir , . Va uni o'rganishning eng yaxshi usuli - uni olish va oddiy misol bilan amalga oshirish. GitHub-da bir nechta Data Vault-ni amalga oshirish misollari mavjud . Zamonaviy ma'lumotlar ombori kitobi: Agile ma'lumotlar omborini ma'lumotlar ombori yordamida modellashtirish Xans Xultgren.
Yakuniy foydalanuvchilar uchun Business Intelligence vositalari bilan tanishish uchun siz Power BI Desktop hisobotlar, asboblar paneli, mini ma'lumotlar ombori bepul dizayneridan foydalanishingiz mumkin. O'quv materiallari: , .
Hadoop va Big Data
- MapReduce-ni uchinchi tomon kutubxonalarisiz mustaqil amalga oshirishdan boshlashingiz kerak. Bu kelajakda ko'p bosqichli ilovalarni yaxshiroq tushunish imkonini beradi. Pythonda ajoyib misol tasvirlangan .
xulosa
Siz o'rgangan hamma narsani ishda qo'llash mumkin emas. Shuning uchun, sizga yangi bilimlarni qo'llashga harakat qiladigan bitiruv loyihasi kerak.
Rejada ma'lumotlarni tahlil qilish va Machine Learning bilan bog'liq mavzular mavjud emas. bu ko'proq Data Scientist kasbiga tegishli. AWS bulutlari, Azure bilan bog'liq mavzular ham yo'q. bu mavzular platformani tanlashga juda bog'liq.
Jamiyatga savollar:
Mening tekislash rejam qanchalik etarli? Nimani olib tashlash yoki qo'shish kerak?
Tezis sifatida qaysi loyihani tavsiya qilasiz?
Manba: www.habr.com