ዛሬ ከውጭው ዓለም ጋር ውጫዊ ግንኙነት የሌላቸው ሰዎች ብቻ ስለ ትልቅ መረጃ አልሰሙም. በሀበሬ ላይ የBig Data Analytics እና ተዛማጅ ርዕሶች ርዕስ ታዋቂ ነው። ነገር ግን በትልቁ ዳታ ጥናት ላይ ራሳቸውን ለማዋል ለሚፈልጉ ልዩ ባለሙያተኞች ላልሆኑ ሰዎች፣ ይህ አካባቢ ምን ዓይነት ተስፋዎች እንዳሉት፣ የቢግ ዳታ ትንታኔዎች የት እንደሚተገበሩ እና ጥሩ ተንታኝ ምን ላይ እንደሚተማመን ሁልጊዜ ግልጽ አይደለም። ለማወቅ እንሞክር።
በሰዎች የሚመነጨው የመረጃ መጠን በየዓመቱ ይጨምራል. በ2020፣ የተከማቸ መረጃ መጠን ወደ 40-44 zettabytes (1 ZB ~ 1 ቢሊዮን ጂቢ) ይጨምራል። በ 2025 - እስከ 400 ዜታባይት. በዚህ መሰረት ዘመናዊ ቴክኖሎጂዎችን በመጠቀም የተዋቀሩ እና ያልተዋቀሩ መረጃዎችን ማስተዳደር ከጊዜ ወደ ጊዜ አስፈላጊ እየሆነ የመጣ ዘርፍ ነው። ሁለቱም የግል ኩባንያዎች እና ሁሉም ሀገሮች ለትልቅ መረጃ ፍላጎት አላቸው.
በነገራችን ላይ በመረጃ መጨመር እና በሰው የመነጨ መረጃን የማቀናበር ዘዴዎች ላይ ውይይት በተደረገበት ወቅት ነበር Big Data የሚለው ቃል የተነሳው። ለመጀመሪያ ጊዜ በ 2008 ኔቸር በተሰኘው መጽሔት አዘጋጅ ክሊፎርድ ሊንች እንደቀረበ ይታመናል.
ከዚያን ጊዜ ጀምሮ የቢግ ዳታ ገበያው በየዓመቱ በብዙ አስር በመቶዎች እየጨመረ ነው። እና ይህ አዝማሚያ, እንደ ባለሙያዎች ገለጻ, ይቀጥላል. ስለዚህ, በኩባንያው ግምት መሰረት እ.ኤ.አ. በ 2021 አጠቃላይ ዓለም አቀፍ ትልቅ የመረጃ ትንተና ገበያ ወደ 67,2 ቢሊዮን ዶላር ያድጋል ። ዓመታዊ ዕድገት ወደ 35,9% ገደማ ይሆናል።
ለምን ትልቅ ዳታ ትንታኔ ያስፈልገናል?
ከተዋቀሩ ወይም ካልተዋቀሩ የውሂብ ስብስቦች እጅግ በጣም ጠቃሚ መረጃን እንዲለዩ ያስችልዎታል. ለዚህም ምስጋና ይግባውና አንድ ንግድ ለምሳሌ አዝማሚያዎችን መለየት, የምርት አፈፃፀምን መተንበይ እና የራሱን ወጪዎች ማመቻቸት ይችላል. ወጪዎችን ለመቀነስ ኩባንያዎች የቅርብ ጊዜ መፍትሄዎችን ተግባራዊ ለማድረግ ዝግጁ መሆናቸውን ግልጽ ነው.
Big Data ለመተንተን የሚያገለግሉ ቴክኖሎጂዎች እና የትንታኔ ዘዴዎች፡-
- ማዕድን ማውጣት;
- ሕዝብ ማሰባሰብ;
- የውሂብ ቅልቅል እና ውህደት;
- የማሽን መማር;
- ሰው ሰራሽ የነርቭ አውታሮች;
- ስርዓተ-ጥለት መለየት;
- ትንበያ ትንታኔ;
- የማስመሰል ሞዴሊንግ;
- የቦታ ትንተና;
- ስታቲስቲካዊ ትንታኔ;
- የትንታኔ ውሂብ ምስላዊ.
በዓለም ላይ ትልቅ የውሂብ ትንታኔ
ትላልቅ የመረጃ ትንተናዎች አሁን በዓለም ዙሪያ ከ 50% በላይ ኩባንያዎች ጥቅም ላይ ይውላሉ. ምንም እንኳን በ 2015 ይህ አሃዝ 17% ብቻ ነበር. ቢግ ዳታ በቴሌኮሙኒኬሽን እና በፋይናንሺያል አገልግሎት ዘርፍ ውስጥ በሚንቀሳቀሱ ኩባንያዎች በንቃት ጥቅም ላይ ይውላል። ከዚያም በጤና አጠባበቅ ቴክኖሎጂ ላይ የተካኑ ኩባንያዎች አሉ. በትምህርት ኩባንያዎች ውስጥ በትንሹ የBig Data Analytics አጠቃቀም፡ በአብዛኛዎቹ ሁኔታዎች የዚህ መስክ ተወካዮች በቅርብ ጊዜ ውስጥ ቴክኖሎጂን የመጠቀም ፍላጎት እንዳላቸው አስታውቀዋል።
በዩናይትድ ስቴትስ ውስጥ, Big Data Analytics በጣም በንቃት ጥቅም ላይ ይውላል: ከተለያዩ መስኮች ከ 55% በላይ ኩባንያዎች በዚህ ቴክኖሎጂ ይሰራሉ. በአውሮፓ እና በእስያ ውስጥ ትልቅ የመረጃ ትንተና ፍላጎት በጣም ዝቅተኛ አይደለም - ወደ 53% ገደማ።
በሩሲያ ውስጥስ?
እንደ IDC ተንታኞች እ.ኤ.አ.. በመካከለኛው እና በምስራቅ አውሮፓ ውስጥ ለእንደዚህ ያሉ መፍትሄዎች የገበያ ዕድገት በጣም ንቁ ነው, ይህ ቁጥር በየዓመቱ በ 11% ይጨምራል. በ2022 በቁጥር 5,4 ቢሊዮን ዶላር ይደርሳል።
በብዙ መልኩ ይህ የገበያ ፈጣን እድገት በሩሲያ ውስጥ በዚህ አካባቢ እድገት ምክንያት ነው. እ.ኤ.አ. በ 2018 በሩሲያ ፌዴሬሽን ውስጥ አግባብነት ካላቸው መፍትሄዎች ሽያጭ የተገኘው ገቢ በጠቅላላው ክልል ውስጥ በቢግ ዳታ ማቀነባበሪያ ቴክኖሎጂዎች ውስጥ ከጠቅላላው ኢንቨስትመንት 40% ደርሷል።
በሩሲያ ፌዴሬሽን ከባንክ እና ከህዝብ ዘርፎች፣ ከቴሌኮሙኒኬሽን ኢንዱስትሪ እና ከኢንዱስትሪ የተውጣጡ ኩባንያዎች በትልቁ ዳታ ሂደት ላይ ከፍተኛ ወጪን ያደርጋሉ።
አንድ ትልቅ ዳታ ተንታኝ ምን ያደርጋል እና በሩሲያ ውስጥ ምን ያህል ያገኛል?
አንድ ትልቅ የመረጃ ተንታኝ እጅግ በጣም ብዙ የሆኑ መረጃዎችን የመመርመር ሃላፊነት አለበት, ሁለቱም በከፊል የተዋቀሩ እና ያልተዋቀሩ. ለባንክ ድርጅቶች እነዚህ ግብይቶች, ለኦፕሬተሮች - ጥሪዎች እና ትራፊክ, በችርቻሮ - የደንበኛ ጉብኝቶች እና ግዢዎች ናቸው. ከላይ እንደተገለፀው የቢግ ዳታ ትንተና በ "ጥሬ መረጃ ታሪክ" ውስጥ በተለያዩ ምክንያቶች መካከል ያለውን ግንኙነት እንድናገኝ ያስችለናል ለምሳሌ የምርት ሂደት ወይም ኬሚካላዊ ምላሽ. በመተንተን መረጃ ላይ በመመስረት, አዳዲስ አቀራረቦች እና መፍትሄዎች በተለያዩ ዘርፎች ተዘጋጅተዋል - ከማምረት እስከ መድሃኒት.
ለትልቅ ዳታ ተንታኝ የሚያስፈልጉ ክህሎቶች፡-
- ትንታኔው በሚካሄድበት አካባቢ ያሉትን ባህሪያት በፍጥነት የመረዳት ችሎታ, እና በሚፈለገው ቦታ ላይ እራስዎን ለማጥለቅ. ይህ የችርቻሮ, የዘይት እና የጋዝ ኢንዱስትሪ, መድሃኒት, ወዘተ ሊሆን ይችላል.
- የስታቲስቲክስ መረጃ ትንተና ዘዴዎች እውቀት, የሂሳብ ሞዴሎች ግንባታ (የነርቭ ኔትወርኮች, የቤይሲያን ኔትወርኮች, ክላስተር, ሪግሬሽን, ፋክተር, ልዩነት እና ተያያዥ ትንታኔዎች, ወዘተ.).
- ከተለያዩ ምንጮች መረጃዎችን ማውጣት፣ ለመተንተን መለወጥ እና ወደ የትንታኔ ዳታቤዝ መጫን መቻል።
- በ SQL ብቃት ያለው።
- ቴክኒካዊ ሰነዶችን በቀላሉ ለማንበብ በቂ በሆነ ደረጃ የእንግሊዝኛ እውቀት።
- የፓይዘን እውቀት (ቢያንስ መሰረታዊ ነገሮች) ፣ ባሽ (ያለ እሱ በስራ ሂደት ውስጥ ለመስራት በጣም ከባድ ነው) ፣ በተጨማሪም የጃቫ እና ስካላ መሰረታዊ ነገሮችን ማወቅ የሚፈለግ ነው (ስፓርክን በንቃት ለመጠቀም ያስፈልጋል ፣ አንዱ ከትልቅ ውሂብ ጋር ለመስራት በጣም ታዋቂ ማዕቀፎች).
- ከሃዱፕ ጋር የመሥራት ችሎታ.
ደህና፣ አንድ ትልቅ ዳታ ተንታኝ ምን ያህል ያገኛል?
የቢግ ዳታ ስፔሻሊስቶች አቅርቦት እጥረት አለባቸው; ይህ የሆነበት ምክንያት የንግድ ሥራ ወደ ግንዛቤ እየመጣ ነው-ልማት አዳዲስ ቴክኖሎጂዎችን ይፈልጋል ፣ እና የቴክኖሎጂ ልማት ልዩ ባለሙያዎችን ይፈልጋል።
ስለዚህ፣ የውሂብ ሳይንቲስት እና የውሂብ ትንታኔ በአሜሪካ እንደ ቅጥር ኤጀንሲው Glassdoor. በአሜሪካ ውስጥ የእነዚህ ስፔሻሊስቶች አማካኝ ደመወዝ ከ100 ሺህ ዶላር ይጀምራል።
በሩሲያ የማሽን መማሪያ ስፔሻሊስቶች በወር ከ 130 እስከ 300 ሺህ ሩብሎች, ትልቅ የውሂብ ተንታኞች - በወር ከ 73 እስከ 200 ሺህ ሮቤል ይቀበላሉ. ሁሉም በልምድ እና ብቃቶች ላይ የተመሰረተ ነው. እርግጥ ነው, ዝቅተኛ ደመወዝ ያላቸው, እና ሌሎች ከፍተኛ ደመወዝ ያላቸው ክፍት ቦታዎች አሉ. በሞስኮ እና በሴንት ፒተርስበርግ ውስጥ ለትልቅ የውሂብ ተንታኞች ከፍተኛው ፍላጎት. ሞስኮ, ምንም አያስደንቅም, 50% ያህል ንቁ ክፍት የስራ ቦታዎችን ይይዛል (እንደ hh.ru). በሚንስክ እና በኪየቭ ውስጥ በጣም ያነሰ ፍላጎት አለ። አንዳንድ ክፍት የስራ ቦታዎች ተለዋዋጭ ሰዓቶችን እና የርቀት ስራዎችን እንደሚሰጡ ልብ ሊባል የሚገባው ነው. ግን በአጠቃላይ ኩባንያዎች በቢሮ ውስጥ የሚሰሩ ልዩ ባለሙያዎችን ይፈልጋሉ.
ከጊዜ በኋላ የBig Data Analys እና ተዛማጅ ልዩ ባለሙያዎች ተወካዮች ፍላጎት እየጨመረ እንደሚሄድ መጠበቅ እንችላለን። ከላይ እንደተገለፀው በቴክኖሎጂው ዘርፍ ያለው የሰው ሃይል እጥረት አልተሰረዘም። ነገር ግን በእርግጥ፣ የቢግ ዳታ ተንታኝ ለመሆን፣ ማጥናት እና መስራት፣ ሁለቱንም ከላይ የተዘረዘሩትን እና ተጨማሪ ክህሎቶችን ማሻሻል ያስፈልግዎታል። የቢግ ዳታ ተንታኝ መንገድ ለመጀመር እድሉ አንዱ ነው። እና በትልቁ ውሂብ ለመስራት እጅዎን ይሞክሩ።
ምንጭ: hab.com