แแฆแแก แแฎแแแแ แแแแแแแแแแก, แ แแแแแแกแแช แแ แแฅแแ แแแ แ แแแแจแแ แ แแแ แ แกแแแงแแ แแกแแแ, แแ แกแแแแแแ แแแแ แแแแแชแแแแแแก แจแแกแแฎแแ. Habrรฉ-แแ แแแแฃแแแ แฃแแแ Big Data แแแแแแขแแแแกแ แแ แแแกแแแ แแแแแแจแแ แแแฃแแ แแแแแแแก แแแแ. แแแแ แแ แแ แแกแแแชแแแแแกแขแแแแกแแแแก, แ แแแแแแกแแช แกแฃแ แ แแแแ แแแแแชแแแแแแก แจแแกแฌแแแแแก แแแฃแแแแ, แงแแแแแแแแก แแ แแ แแก แแแแแแ, แ แ แแแ แกแแแฅแขแแแแแ แแฅแแก แแ แกแคแแ แแก, แกแแ แจแแแซแแแแ แแแแแแงแแแแก แแแแ แแแแแชแแแแ แแแแแแขแแแ แแ แ แแกแ แแแแแ แแฅแแก แแแ แ แแแแแแขแแแแกแก. แจแแแแชแแแแ แแแแแ แแแแ.
แแแแแแแแแแแก แแแแ แแแแแแฃแจแแแแแฃแแ แแแคแแ แแแชแแแก แ แแแแแแแแ แงแแแแแฌแแแฃแ แแ แแแ แแแแ. 2020 แฌแแแกแแแแก แจแแแแฎแฃแแ แแแแแชแแแแแแก แ แแแแแแแแ แแแแแ แแแแ 40-44 แแแขแแแแแขแแแแ (1 ZB ~ 1 แแแแแแ แแ GB). 2025 แฌแแแกแแแแก - แแแแฎแแแแแแ 400 แแแขแแแแแขแแแแ. แจแแกแแแแแแกแแ, แกแขแ แฃแฅแขแฃแ แแ แแแฃแแ แแ แแ แแกแขแ แฃแฅแขแฃแ แแ แแแฃแแ แแแแแชแแแแแแก แแแ แแแ แแแแแแแแ แแแ แขแแฅแแแแแแแแแแก แแแแแงแแแแแแ แแ แแก แกแคแแ แ, แ แแแแแแช แกแฃแ แฃแคแ แ แแแแจแแแแแแแแแ แฎแแแแ. แแแแ แแแแแชแแแแแแ แแแแแขแแ แแกแแแฃแแแ แ แแแแ แช แชแแแแแฃแแ แแแแแแแแแแ, แแกแแแ แแแแแ แฅแแแงแแแแ.
แกแฎแแแแ แจแแ แแก, แกแฌแแ แแ แกแแแแคแแ แแแชแแ แแฃแแแกแ แแ แแแแแแแแแก แแแแ แฌแแ แแแแแฃแแ แแแแแชแแแแแแก แแแแฃแจแแแแแแก แแแแแแแแแก แแแแฎแแแแแกแแก แแแฉแแแ แขแแ แแแแ Big Data. แแแแแแแ, แ แแ แแก แแแ แแแแแ 2008 แฌแแแก แจแแแแแแแแแแแ แแฃแ แแแ Nature-แแก แ แแแแฅแขแแ แแ แแแแคแแ แ แแแแฉแแ.
แแแก แจแแแแแ แแแแ แแแแแชแแแแ แแแแแ แ แงแแแแแฌแแแฃแ แแ แแแ แแแแ แ แแแแแแแแ แแแแฃแแ แแ แแชแแแขแแ. แแ แแก แขแแแแแแชแแ, แแฅแกแแแ แขแแแแก แแแ แแ, แแแแ แซแแแแแแ. แแแ แแแแ, แแแแแแแแแก แจแแคแแกแแแแ
แ แแขแแ แแแญแแ แแแแ แแแแ แแแแแชแแแแแแก แแแแแแขแแแ?
แแก แกแแจแฃแแแแแแก แแแซแแแแ แแแแแชแแแ แซแแแแแ แฆแแ แแแฃแแ แแแคแแ แแแชแแ แกแขแ แฃแฅแขแฃแ แแ แแแฃแแ แแ แแ แแกแขแ แฃแฅแขแฃแ แแ แแแฃแแ แแแแแชแแแแ แแแแ แแแแแแ. แแแแก แฌแงแแแแแแ, แแแแแแกแก แจแแฃแซแแแ, แแแแแแแแแ, แขแแแแแแชแแแแแก แแแแแขแแคแแชแแ แแแ, แฌแแ แแแแแแก แจแแกแ แฃแแแแแก แแ แแแแแแแ แแแ แแ แกแแแฃแแแ แ แฎแแ แฏแแแแก แแแขแแแแแแชแแ. แแแแแแแ, แ แแ แฎแแ แฏแแแแก แจแแแชแแ แแแแก แแแแแแ แแแแแแแแแแ แแแแ แแ แแแ แแแแแฎแแ แชแแแแแ แฃแแฎแแแกแ แแแแแฌแงแแแขแแแแแแแ.
แขแแฅแแแแแแแแแ แแ แแแแแแแแก แแแแแแแแ, แ แแแแแแแช แแแแแแงแแแแแ แแแแ แแแแแชแแแแแแก แแแกแแแแแแแแแแแแ:
- แฒแแแแชแแแแแแก แแแแแแแแ;
- crowdsourcing;
- แแแแแชแแแแ แจแแ แแแ แแ แแแขแแแ แแชแแ;
- แแแแฅแแแแแแชแแแแแแแ;
- แฎแแแแแแฃแ แ แแแ แแฃแแ แฅแกแแแแแ;
- แแแแฃแจแแก แแแแชแแแแ;
- แแ แแแแแแแ แแแแแ แแแแแแขแแแ;
- แกแแแฃแแแชแแฃแ แ แแแแแแแ แแแ;
- แกแแแ แชแแแ แแแแแแแ;
- แกแขแแขแแกแขแแแฃแ แ แแแแแแแ;
- แแแแแแขแแแฃแ แ แแแแแชแแแแแแก แแแแฃแแแแแแชแแ.
แแแแ แแแแแชแแแแแแก แแแแแแขแแแ แแกแแคแแแแจแ
แแแแ แแแแแชแแแแแแก แแแแแแขแแแแก แแแแแแแ แแกแแคแแแแจแ แแแแแแแแแแแก 50%-แแ แแแขแ แแงแแแแแก. แแแฃแฎแแแแแแ แแแแกแ, แ แแ 2015 แฌแแแก แแก แแแฉแแแแแแแแ แแฎแแแแ 17% แแงแ. Big Data-แก แงแแแแแแ แแฅแขแแฃแ แแ แแงแแแแแแ แกแแขแแแแแแแฃแแแแแชแแ แแ แคแแแแแกแฃแ แ แแแแกแแฎแฃแ แแแแก แกแแฅแขแแ แจแ แแแฅแแแแ แแแแแแแแแแ. แจแแแแแ แแ แแก แแแแแแแแแแ, แ แแแแแแแช แกแแแชแแแแแแแ แแแฃแแแ แแ แแแ แฏแแแแแชแแแก แขแแฅแแแแแแแแแจแ. Big Data แแแแแแขแแแแก แแแแแแแแฃแ แ แแแแแงแแแแแ แกแแแแแแแแแแแแแแ แแแแแแแแแแจแ: แฃแแแขแแก แจแแแแฎแแแแแจแ, แแ แกแคแแ แแก แฌแแ แแแแแแแแแแแแ แแชแฎแแแแแแแแ แฃแแฎแแแแก แแแแแแแแจแ แขแแฅแแแแแแแแแแก แแแแแงแแแแแแก แแแแแ แแฎแแแก.
แจแแแ แแแแฃแ แจแขแแขแแแจแ แงแแแแแแ แแฅแขแแฃแ แแ แแแแแแงแแแแแ Big Data แแแแแแขแแแ: แแ แขแแฅแแแแแแแแ แแฃแจแแแแก แกแฎแแแแแกแฎแแ แกแคแแ แแก แแแแแแแแแแแก 55%-แแ แแแขแ. แแแ แแแแกแ แแ แแแแแจแ แแแแ แแแแแชแแแแแแก แแแแแแขแแแแแ แแแแฎแแแแ แแ แแ แแก แแแชแแแแแแ แแแแแแ - แแแแฎแแแแแแ 53%.
แ แแช แจแแแฎแแแ แ แฃแกแแแก?
IDC-แแก แแแแแแขแแแแกแแแแก แแแ แแ,
แแ แแแแแ แแแแแกแแแ แแกแแ, แแแแ แแก แแก แกแฌแ แแคแ แแแแแแแแ แแแ แแแแแแ แแแแแฃแแแ แแ แขแแ แแขแแ แแแก แแ แแแ แ แฃแกแแแจแ. 2018 แฌแแแก แ แฃแกแแแแก แคแแแแ แแชแแแจแ แจแแกแแแแแแกแ แแแแแฌแงแแแขแแแแแแแแก แ แแแแแแแชแแแแแ แแแฆแแแฃแแ แจแแแแกแแแแแ แจแแแแแแแแ แแแแ แ แแแแแแจแ แแแแ แแแแแชแแแแ แแแแฃแจแแแแแแก แขแแฅแแแแแแแแแจแ แแแแแแแ แแแแแกแขแแชแแแก 40%-แก.
แ แฃแกแแแแก แคแแแแ แแชแแแจแ แแแแแแแแแแ แกแแแแแแ แแ แกแแฏแแ แ แกแแฅแขแแ แแแแแแ, แกแแขแแแแแแแฃแแแแแชแแ แแแแฃแกแขแ แแแแแ แแ แแแแฃแกแขแ แแแแแ แงแแแแแแ แแแขแก แฎแแ แฏแแแแ แแแแ แแแแแชแแแแแแก แแแแฃแจแแแแแแแ.
แ แแก แแแแแแแก แแแแ แแแแแชแแแแ แแแแแแขแแแแกแ แแ แ แแแแแแก แจแแฃแแแแก แ แฃแกแแแจแ?
แแแแ แแแแแชแแแแแแก แแแแแแขแแแแกแ แแแกแฃแฎแแกแแแแแแแแ แแแแ แ แแแแแแแแแ แแแคแแ แแแชแแแก แแแแแแแแแแแแ, แ แแแแ แช แแแฎแแแ แแ แกแขแ แฃแฅแขแฃแ แแ แแแฃแแ, แแกแแแ แแ แแกแขแ แฃแฅแขแฃแ แแ แแแฃแแ. แกแแแแแแ แแ แแแแแแแชแแแแแกแแแแก แแก แแ แแก แขแ แแแแแฅแชแแแแ, แแแแ แแขแแ แแแแกแแแแก - แแแ แแแ แแ แขแ แแคแแแ, แกแแชแแแ แแแญแ แแแแจแ - แแแแแแขแแแแก แแแแแขแแแ แแ แจแแกแงแแแแแแ. แ แแแแ แช แแแแแ แแฆแแแแจแแ, แแแแ แแแแแชแแแแ แแแแแแแ แกแแจแฃแแแแแแก แแแแซแแแแก แแฆแแแแแฉแแแแ แแแแจแแ แ แกแฎแแแแแกแฎแแ แคแแฅแขแแ แแแก แจแแ แแก โแแแแแแฃแแ แแแคแแ แแแชแแแก แแกแขแแ แแแจแโ, แแแแแแแแแ, แฌแแ แแแแแแก แแ แแชแแกแก แแ แฅแแแแฃแ แ แแแฅแชแแแก. แแแแแแแแก แแแแแชแแแแแแ แแแงแ แแแแแแ, แจแแแฃแจแแแแแฃแแแ แแฎแแแ แแแแแแแแแ แแ แแแแแฌแงแแแขแแแแแแแ แกแฎแแแแแกแฎแแ แกแคแแ แแจแ - แฌแแ แแแแแแแแ แแแแแชแแแแแแ.
แแแแ แแแแแชแแแแแแก แแแแแแขแแแแกแแกแแแแก แกแแญแแ แ แฃแแแ แแแ:
- แฃแแแ แ แกแฌแ แแคแแ แแแแแแก แแแแกแแแแแ แแ แกแคแแ แแจแ, แ แแแแแกแแแแกแแช แขแแ แแแแ แแแแแแแ แแ แฉแแแคแแ แกแแกแฃแ แแแแ แแ แแแแแก แแกแแแฅแขแแแจแ. แแก แจแแแซแแแแ แแงแแก แกแแชแแแ แแแญแ แแแ, แแแแแแแแกแ แแ แแแแแก แแ แแฌแแแแแแ, แแแแแชแแแ แแ แ.แจ.
- แกแขแแขแแกแขแแแฃแ แ แแแแแชแแแแแแก แแแแแแแแก แแแแแแแแแก แชแแแแ, แแแแแแแขแแแฃแ แ แแแแแแแแแก แแแแแ (แแแ แแฃแแ แฅแกแแแแแ, แแแแแกแแก แฅแกแแแแแ, แแแแกแขแแ แแ แแแ, แ แแแ แแกแแ, แคแแฅแขแแ แแแแก, แแแ แแแชแแแแแกแ แแ แแแ แแแแชแแฃแ แ แแแแแแแแแ แแ แกแฎแ.).
- แจแแซแแแก แแแแแชแแแแแแก แแแแฆแแแ แกแฎแแแแแกแฎแแ แฌแงแแ แแแแ, แแแ แแแฅแแแแก แแแแแแแแกแแแแก แแ แฉแแขแแแ แแแก แแแแแแขแแแฃแ แแแแแชแแแแ แแแแแจแ.
- แคแแแแก SQL-แก.
- แแแแแแกแฃแ แ แแแแก แชแแแแ แกแแแแแ แแกแแ แขแแฅแแแแฃแ แ แแแแฃแแแแขแแชแแแก แแแแแแแ แฌแแกแแแแแฎแแ.
- Python-แแก (แแแแแแฃแ แกแแคแฃแซแแแแแแก), Bash-แแก แชแแแแ (แแแแก แแแ แแจแ แซแแแแแ แ แแฃแแแ แแฃแจแแแแแก แแ แแชแแกแจแ), แแแฃแก แกแแกแฃแ แแแแแ แแชแแแ Java-แกแ แแ Scala-แก แกแแคแฃแซแแแแแ (แกแแญแแ แแ Spark-แแก แแฅแขแแฃแ แ แแแแแงแแแแแแกแแแแก, แแ แ-แแ แแ. แงแแแแแแ แแแแฃแแแ แฃแแ แฉแแ แฉแแแแ แแแ แแแแแชแแแแแแแ แแฃแจแแแแแกแแแแก).
- Hadoop-แแแ แแฃแจแแแแแก แฃแแแ แ.
แแแ, แ แแแแแแก แจแแฃแแแแก แแแแ แแแแแชแแแแ แแแแแแขแแแแกแ?
แแแแ แแแแแชแแแแ แกแแแชแแแแแกแขแแแ แแฎแแ แแแคแแชแแขแ แแ แแแ, แแแแฎแแแแ แแฆแแแแขแแแ แแแฌแแแแแแก. แแก แแแแขแแ แฎแแแแ, แ แแ แแแแแแกแ แแชแแแแแแ แแแก: แแแแแแแแ แแแแก แแฎแแแ แขแแฅแแแแแแแแแ แกแญแแ แแแแ, แขแแฅแแแแแแแแแแก แแแแแแแแ แแแ แแ แกแแแชแแแแแกแขแแแก.
แแกแ แ แแ, แแแแแชแแแแ แแแชแแแแ แ แแ แแแแแชแแแแ แแแแแแขแแแ แแจแจ-แจแ
แ แฃแกแแแจแ, แแแแฅแแแแแแชแแแแแแแแก แกแแแชแแแแแกแขแแแ แแฆแแแแ 130-แแแ 300 แแแแก แ แฃแแแก แแแแจแ, แแแแ แแแแแชแแแแแแก แแแแแแขแแแแกแแแ - 73-แแแ 200 แแแแก แ แฃแแแแแแ แแแแจแ. แแก แงแแแแแคแแ แ แแแแแแแแแแฃแแแ แแแแแชแแแแแแแแ แแ แแแแแแคแแแแชแแแแ. แ แ แแฅแแ แฃแแแ, แแ แแก แแแแแแกแแแแ แแแแแแ แฎแแแคแแกแแ แแ แกแฎแแแแ แฃแคแ แ แแแฆแแแ. แแแฅแกแแแแแฃแ แ แแแแฎแแแแ แแแแ แแแแแชแแแแแแก แแแแแแขแแแแกแแแแ แแแกแแแแกแ แแ แแแขแแ แแฃแ แแจแ. แแแกแแแแ, แ แแช แแแกแแแแแ แ แแ แแ แแก, แแฅแขแแฃแ แ แแแแแแกแแแแแก แแแแฎแแแแแแ 50%-แก แจแแแแแแแก (hh.ru-แก แแแฎแแแแแ). แแแชแแแแแแ แแแแแแแ แแแแฎแแแแแ แแแแกแแกแ แแ แแแแแจแ. แแฆแกแแแแจแแแแแ, แ แแ แแแแแแ แแ แแแแแแกแแ แแแแแแแแแ แแแฅแแแ แกแแแแแแก แแ แแแกแขแแแชแแฃแ แแฃแจแแแแแก. แแแแ แแ แแแแแแแ, แแแแแแแแแแก แกแญแแ แแแแแ แกแแแชแแแแแกแขแแแ, แ แแแแแแแช แแฃแจแแแแแ แแคแแกแจแ.
แแ แแแ แแแแแแแแแแแจแ แจแแแซแแแแ แแแแแแแ แแแแฎแแแแแก แแ แแแก Big Data แแแแแแขแแแแกแแแแ แแ แแแกแแแ แแแแแแจแแ แแแฃแแ แกแแแชแแแแแแแแแก แฌแแ แแแแแแแแแแแแแ. แ แแแแ แช แแแแแ แแฆแแแแจแแ, แขแแฅแแแแแก แกแแฅแขแแ แจแ แแแแ แแแแก แแแคแแชแแขแ แแ แแแฃแฅแแแแฃแแ. แแแแ แแ, แ แ แแฅแแ แฃแแแ, แแแแกแแแแแก, แ แแ แแแฎแแแ แแแแ แแแแแชแแแแ แแแแแแขแแแแกแ, แแฅแแแ แฃแแแ แแกแฌแแแแแ แแ แแแฃแจแแแ, แแแแฃแแฏแแแแกแแ แ แแแแ แช แแแแแ แฉแแแแแแแแแ, แแกแแแ แแแแแขแแแแแ แฃแแแ แแแ. แแแแ แแแแแชแแแแ แแแแแแขแแแแกแแก แแแแก แแแกแแฌแงแแแแ แแ แ-แแ แแ แจแแกแแซแแแแแแแ แแ แแก
แฌแงแแ แ: www.habr.com