ืืืื ืจืง ืื ืฉืื ืฉืืื ืืื ืงืฉืจืื ืืืฆืื ืืื ืขื ืืขืืื ืืืืฆืื ืื ืฉืืขื ืขื ืืื ืืืื. ื-Habrรฉ, ืื ืืฉื ืฉื ื ืืชืื Big Data ืื ืืฉืืื ืงืฉืืจืื ืคืืคืืืจื. ืืื ืขืืืจ ืืืืืื ืฉืืื ื ืืืืืื ืฉืืจืฆื ืืืชืืกืจ ืืืงืจ ืืื ืืืื, ืื ืชืืื ืืจืืจ ืืืื ืกืืืืืื ืืฉ ืืชืืื ืืื, ืืืื ื ืืชื ืืืืฉื ื ืืชืื ืืื ืืืื ืืขื ืื ืื ืืืกื ืืื ืืืื ืืกืืื. ืืืื ื ื ืกื ืืืืื ืืช ืื.
ืืืืช ืืืืืข ืฉื ืืฆืจ ืขื ืืื ืื ื ืืื ืืืื ืืื ืฉื ื. ืขื 2020, ืืืืช ืื ืชืื ืื ืืืืืืกื ืื ืชืืื ื-40-44 ืืื-ืืืื (1 ZB ~ 1 ืืืืืืจื GB). ืขื 2025 - ืขื ื-400 ืืื-ืืืื. ืืืชืื ืืื, ื ืืืื ื ืชืื ืื ืืืื ืื ืืืืชื ืืืื ืื ืืืืฆืขืืช ืืื ืืืืืืืช ืืืืจื ืืืช ืืื ืชืืื ืฉืืืื ืื ืืื ืืฉืื ืืืชืจ ืืืืชืจ. ืื ืืืจืืช ืืืืืืช ืืื ืืืื ืืช ืฉืืืืช ืืชืขื ืืื ืื ืืืื ืืืื.
ืืื, ืืืืื ืืืืื ืขื ืชื ืืคืช ืืืืืข ืืฉืืืืช ืขืืืื ืื ืชืื ืื ืฉื ืืฆืจื ืขื ืืื ืืื ืขืื ืืืื ื Big Data. ืืื ืืืืื ืื ืืื ืืืฆืข ืืจืืฉืื ื ืืฉื ืช 2008 ืขื ืืื ืขืืจื ืืชื ืืขืช Nature, ืงืืืคืืจื ืืื ืฅ'.
ืืื, ืฉืืง ืืืื ืืืื ืืื ืืื ืฉื ื ืืืื ืขืฉืจืืช ืืืืืื. ืืืืืื ืืื, ืืคื ืืืืืื, ืชืืืฉื. ืื, ืขื ืคื ืืขืจืืืช ืืืืจื
ืืื ืื ืื ื ืฆืจืืืื ื ืืชืื ืืื ืืืื?
ืื ืืืคืฉืจ ืื ืืืืืช ืืืืข ืืขื ืขืจื ืจื ืืืขืจืื ื ืชืื ืื ืืืื ืื ืื ืื ืืืื ืื. ืืืืืช ืืื, ืขืกืง ืืืื, ืืืฉื, ืืืืืช ืืืืืช, ืืืืืช ืืช ืืืฆืืขื ืืืืฆืืจ ืืืืืขื ืืช ืืขืืืืืช ืฉืื. ืืจืืจ ืฉืืื ืืืืืื ืขืืืืืช ืืืจืืช ืืืื ืืช ืืืืฉื ืืช ืืคืชืจืื ืืช ืืขืืื ืืื ืืืืชืจ.
ืืื ืืืืืืืช ืืฉืืืืช ื ืืชืื ืืืฉืืฉืืช ืื ืืชืื ืืื ืืืื:
- ืืจืืืช ืืืืข;
- ืืืงืืจ ืืืื ืื;
- ืขืจืืื ืืฉืืืื ื ืชืื ืื;
- ืืืืืช ืืืื ื;
- ืจืฉืชืืช ืขืฆืืืืช ืืืืืืชืืืช;
- ืืืืื ืชืื ืืช;
- ื ืืชืื ืืืืื;
- ืืืืื ืืช ืกืืืืืฆืื;
- ื ืืชืื ืืจืืื;
- ื ืืชืื ืกืืืืกืื;
- ืืืืื ืฉื ื ืชืื ืื ืื ืืืืืื.
ื ืืชืื ืืื ืืืื ืืขืืื
ื ืืชืื ืืื ืืืื ื ืืฆื ืืืื ืืฉืืืืฉ ืขื ืืื ืืืชืจ ื-50% ืืืืืจืืช ืืจืืื ืืขืืื. ืืืจืืช ืืขืืืื ืฉืืฉื ืช 2015 ื ืชืื ืื ืขืื ืขื 17% ืืืื. ืืื ืืืื ื ืืฆื ืืฉืืืืฉ ืืคืขืื ืืืืชืจ ืขื ืืื ืืืจืืช ืืคืืขืืืช ืืืืืจื ืืชืงืฉืืจืช ืืืฉืืจืืชืื ืืคืื ื ืกืืื. ืืื ืืฉ ืืืจืืช ืฉืืชืืืืช ืืืื ืืืืืืืช ืืจืืืืช. ืฉืืืืฉ ืืื ืืืื ื-Big Data Analytics ืืืืจืืช ืืื ืื: ืืจืื ืืืงืจืื, ื ืฆืืื ืชืืื ืื ืืืืืขื ืขื ืืืื ืชื ืืืฉืชืืฉ ืืืื ืืืืืื ืืขืชืื ืืงืจืื.
ืืืจืฆืืช ืืืจืืช ื ืขืฉื ืฉืืืืฉ ืคืขืื ืืืืชืจ ื-Big Data Analytics: ืืืชืจ ื-55% ืืืืืจืืช ืืืืืื ืชืืืืื ืขืืืืืช ืขื ืืื ืืืืืื ืื. ืืืืจืืคื ืืืืกืื, ืืืืงืืฉ ืื ืืชืื ืืื ืืืื ืืื ื ื ืืื ืืืจืื - ื-53%.
ืืื ืขื ืจืืกืื?
ืืคื ืื ืืืกืืื ืฉื ืืืื ืชืืืื,
ืืืืื ืื ืจืืื, ืืชืคืชืืืช ืืืืจื ืื ืฉื ืืฉืืง ื ืืืขืช ืืืฆืืืื ืฉื ืืืืจ ืื ืืจืืกืื. ืืฉื ืช 2018, ืืืื ืกืืช ืืืืืจืช ืคืชืจืื ืืช ืจืืืื ืืืื ืืคืืจืฆืื ืืจืืกืืช ืืกืชืืื ื-40% ืืกื ืืืฉืงืขื ืืืื ืืืืืืืช ืขืืืื Big Data ืืืืืจ ืืืื.
ืืคืืจืฆืื ืืจืืกืืช, ืืืจืืช ืืืืืืจ ืืื ืงืื ืืืฆืืืืจื, ืชืขืฉืืืช ืืืืงืืืื ืืงืฆืื ืืืชืขืฉืืื ืืืฆืืืืช ืืื ืืจืื ืขื ืขืืืื ืืื ืืืื.
ืื ืขืืฉื ืื ืืืกื ืืื ืืืื ืืืื ืืื ืืจืืืื ืืจืืกืื?
ืื ืชื ืืื ืืืื ืืืจืื ืืืืื ืช ืืืืืืช ืขืฆืืืืช ืฉื ืืืืข, ืื ืืืื ื ืืืืฆื ืืื ืื ืืืื ืืช. ืขืืืจ ืืจืืื ืื ืื ืงืืืื ืืืืืจ ืืขืกืงืืืช, ืขืืืจ ืืคืขืืืื โ ืฉืืืืช ืืชืขืืืจื, ืืงืืขืื ืืืช โ ืืืงืืจืื ืืจืืืฉืืช ืฉื ืืงืืืืช. ืืืืืจ, ื ืืชืื ืืื ืืืื ืืืคืฉืจ ืื ื ืืืืืช ืงืฉืจืื ืืื ืืืจืืื ืฉืื ืื ื"ืืืกืืืจืืืช ืืืืืข ืืืืืื", ืืืฉื, ืชืืืื ืืืฆืืจ ืื ืชืืืื ืืืืืช. ืขื ืืกืืก ื ืชืื ื ืื ืืชืื ืืคืืชืืืช ืืืฉืืช ืืคืชืจืื ืืช ืืืฉืื ืืืืืื ืชืืืืื - ืืืืฆืืจ ืืขื ืจืคืืื.
ืืืืื ืืืืช ืื ืืจืฉืืช ืืื ืืืกื ืืื ืืืื:
- ืืืืืืช ืืืืื ืืืืืจืืช ืืช ืืืืคืืื ืื ืืืืืจ ืฉืขืืืจื ืืชืืฆืข ืื ืืชืื, ืืืืชืขืืง ืืืืืืื ืฉื ืืืืืจ ืืจืฆืื. ืื ืืืื ืืืืืช ืงืืขืื ืืืช, ืชืขืฉืืืช ื ืคื ืืื, ืจืคืืื ืืื'.
- ืืืจืช ืฉืืืืช ื ืืชืื ื ืชืื ืื ืกืืืืกืืืื, ืื ืืืช ืืืืืื ืืชืืืืื (ืจืฉืชืืช ืขืฆืืืืช, ืจืฉืชืืช ืืืืกืืื ืืืช, ืืฉืืืืืช, ืจืืจืกืื, ื ืืชืืื ืืืจืืื, ืฉืื ืืช ืืงืืจืืฆืื ืืขืื).
- ืืืืืช ืืกืืื ืืืืฅ ื ืชืื ืื ืืืงืืจืืช ืฉืื ืื, ืืืคืื ืืืชื ืื ืืชืื ืืืืขืื ืืืชื ืืืกื ื ืชืื ืื ืื ืืืื.
- ืืขื ืฉืืืื ื-SQL.
- ืืืืขืช ืื ืืืืช ืืจืื ืืกืคืงืช ืืงืจืืืช ืชืืขืื ืืื ื ืืงืืืช.
- ืืืจืช Python (ืืคืืืช ืืืกืืก), Bash (ืงืฉื ืืืื ืืืกืชืืจ ืืืขืืื ืืชืืืื ืืขืืืื), ืื ืืกืฃ ืจืฆืื ืืืืืจ ืืช ืืืกืืืืช ืฉื Java ื-Scala (ืืจืืฉ ืืฉืืืืฉ ืคืขืื ื-Spark, ืืื ืืืกืืจืืช ืืคืืคืืืจืืืช ืืืืชืจ ืืขืืืื ืขื ื ืชืื ืื ืืืืืื).
- ืืืืืช ืขืืืื ืขื Hadoop.
ืืืื, ืืื ืืจืืืื ืื ืืืกื ืืื ืืืื?
ืืืืื ืืื ืืืื ื ืืฆืืื ืืขืช ืืืืกืืจ; ืืืืงืืฉ ืขืืื ืขื ืืืืฆืข. ืืกืืื ืืื ืืื ืฉืืขืกืงืื ืืืืขืื ืืืื ื: ืคืืชืื ืืืจืฉ ืืื ืืืืืืืช ืืืฉืืช, ืืคืืชืื ืืื ืืืืื ืืืจืฉ ืืืืืื.
ืื, ืืืขื ื ืชืื ืื ืื ืืชืื ื ืชืื ืื ืืืจื"ื
ืืจืืกืื, ืืืืื ืืืืืช ืืืื ื ืืงืืืื ืืื 130 ื-300 ืืืฃ ืจืืื ืืืืืฉ, ืื ืชืื ืืื ืืืื - ืืื 73 ื-200 ืืืฃ ืจืืื ืืืืืฉ. ืืื ืชืืื ืื ืืกืืื ืืืืืฉืืจืื. ืืืืื ืฉืืฉ ืืฉืจืืช ืคื ืืืืช ืืฉืืจ ื ืืื ืืืชืจ, ืืืืจืืช ืืขืืืช ืืืืื ืืืชืจ. ืืจืืฉื ืืงืกืืืืืช ืืื ืชืื ืืื ืืืื ืืืืกืงืื ืืืกื ื ืคืืจืกืืืจื. ืืืกืงืื, ืืื ืื ืืคืชืืข, ืืืืื ื-50% ืืืืฉืจืืช ืืคื ืืืืช ืืคืขืืืืช (ืืคื hh.ru). ืืจืื ืคืืืช ืืืงืืฉ ืืืื ืกืง ืืืงืืื. ืจืืื ืืฆืืื ืฉืืืง ืืืืฉืจืืช ืืคื ืืืืช ืืฆืืขืืช ืฉืขืืช ืืืืฉืืช ืืขืืืื ืืจืืืง. ืืื ืืืืคื ืืืื, ืืืจืืช ืืงืืงืืช ืืืืืืื ืฉืขืืืืื ืืืฉืจื.
ืขื ืืืื, ืื ื ืืืืืื ืืฆืคืืช ืืขืืืื ืืืืงืืฉ ืืื ืืืกืืื ืฉื Big Data ืื ืฆืืืื ืฉื ืืชืืืืืืช ืงืฉืืจืืช. ืืืืืจ, ืืืืกืืจ ืืืื ืืื ืืืืืจ ืืืื ืืืืื ืื ืืืื. ืืื, ืืืืื, ืืื ืืืืืช ืื ืชื ืืื ืืืื, ืืชื ืฆืจืื ืืืืื ืืืขืืื, ืืฉืคืจ ืื ืืช ืืืืืื ืืืืช ืืืคืืจืืืช ืืขืื ืืื ื ืืกืคืืช. ืืืช ืืืืืื ืืืืช ืืืชืืื ืืช ืืจืื ืฉื ืื ืชื Big Data ืืื
ืืงืืจ: www.habr.com