{"id":30268,"date":"2019-10-31T21:34:35","date_gmt":"2019-10-31T18:34:35","guid":{"rendered":"https:\/\/prohoster.info\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya\/"},"modified":"2019-10-31T21:34:35","modified_gmt":"2019-10-31T18:34:35","slug":"kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pl\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya","title":{"rendered":"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"<p>Ka\u017cda operacja z du\u017cymi danymi wymaga du\u017cej mocy obliczeniowej. Zwyk\u0142e przenoszenie danych z bazy na Hadoop mo\u017ce trwa\u0107 tygodnie lub kosztowa\u0107 tyle, co skrzyd\u0142o samolotu. Nie chcesz czeka\u0107 i wydawa\u0107 pieni\u0119dzy? R\u00f3wnowa\u017c obci\u0105\u017cenie na r\u00f3\u017cnych platformach. Jednym ze sposob\u00f3w jest optymalizacja pushdown.<\/p>\n<p><\/p>\n<p>Poprosi\u0142em wiod\u0105cego szkoleniowca w Polsce w zakresie opracowywania i zarz\u0105dzania produktami Informatica, Aleksieja Ananieva, aby opowiedzia\u0142 o funkcji optymalizacji pushdown w Informatica Big Data Management (BDM). Kiedy\u015b uczyli\u015bcie si\u0119 pracowa\u0107 z produktami Informatica? Prawdopodobnie to Aleksiej uczy\u0142 was podstaw PowerCenter i wyja\u015bnia\u0142, jak budowa\u0107 mapowania. <\/p>\n<p><\/p>\n<p><strong>Aleksiej Ananiew, kierownik dzia\u0142u szkole\u0144 DIS Group<\/strong><\/p>\n<p><\/p>\n<p><strong>Czym jest pushdown?<\/strong><\/p>\n<p><\/p>\n<p>Wielu z was jest ju\u017c zaznajomionych z Informatica Big Data Management (BDM). Produkt potrafi integrowa\u0107 du\u017ce dane z r\u00f3\u017cnych \u017ar\u00f3de\u0142, przemieszcza\u0107 je pomi\u0119dzy r\u00f3\u017cnymi systemami, zapewnia \u0142atwy dost\u0119p, umo\u017cliwia profilowanie i wiele wi\u0119cej.<br \/>\nW zr\u0119cznych r\u0119kach BDM potrafi czyni\u0107 cuda: zadania b\u0119d\u0105 wykonywane szybko i z minimalnymi zasobami obliczeniowymi. <\/p>\n<p><\/p>\n<p>Czy r\u00f3wnie\u017c tego pragniecie? Nauczcie si\u0119 korzysta\u0107 z funkcji pushdown w BDM, aby roz\u0142o\u017cy\u0107 obci\u0105\u017cenie obliczeniowe mi\u0119dzy r\u00f3\u017cnymi platformami. Technologia pushdown pozwala przekszta\u0142ci\u0107 mapowanie w skrypt i wybra\u0107 \u015brodowisko, w kt\u00f3rym ten skrypt zostanie uruchomiony. Mo\u017cliwo\u015b\u0107 takiego wyboru pozwala \u0142\u0105czy\u0107 mocne strony r\u00f3\u017cnych platform i osi\u0105ga\u0107 ich maksymaln\u0105 wydajno\u015b\u0107.<\/p>\n<p><\/p>\n<p>Aby skonfigurowa\u0107 \u015brodowisko wykonania skryptu, nale\u017cy wybra\u0107 typ pushdown. Skrypt mo\u017ce by\u0107 ca\u0142kowicie uruchomiony na Hadoop lub cz\u0119\u015bciowo roz\u0142o\u017cony mi\u0119dzy \u017ar\u00f3d\u0142em a odbiorc\u0105. Istniej\u0105 4 mo\u017cliwe typy pushdown. Mapowanie mo\u017cna nie przekszta\u0142ca\u0107 w skrypt (native). Mapowanie mo\u017cna wykona\u0107 maksymalnie na \u017ar\u00f3dle (source) lub ca\u0142kowicie na \u017ar\u00f3dle (full). R\u00f3wnie\u017c mapowanie mo\u017cna przekszta\u0142ci\u0107 w skrypt Hadoop (none).<\/p>\n<p><noindex><a rel=\"nofollow\" name=\"habracut\"><\/a><\/noindex><\/p>\n<p><strong>Optymalizacja pushdown<\/strong><\/p>\n<p><\/p>\n<p>Wymienione 4 typy mo\u017cna \u0142\u0105czy\u0107 w r\u00f3\u017cny spos\u00f3b \u2013 optymalizowa\u0107 pushdown pod konkretne potrzeby systemu. Na przyk\u0142ad cz\u0119sto sensowniej jest wydobywa\u0107 dane z bazy danych, wykorzystuj\u0105c jej w\u0142asne mo\u017cliwo\u015bci. A przetwarza\u0107 dane przy pomocy Hadoop, aby nie przeci\u0105\u017ca\u0107 samej bazy.<\/p>\n<p><\/p>\n<p>Rozwa\u017cmy przypadek, w kt\u00f3rym zar\u00f3wno \u017ar\u00f3d\u0142o, jak i odbiornik znajduj\u0105 si\u0119 w bazie danych, a platforma realizacji transformacji mo\u017ce by\u0107 wybrana: w zale\u017cno\u015bci od ustawie\u0144 b\u0119dzie to Informatica, serwer bazy danych lub Hadoop. Taki przyk\u0142ad pozwoli najlepiej zrozumie\u0107 techniczne aspekty dzia\u0142ania tego mechanizmu. Oczywi\u015bcie, w rzeczywistym \u017cyciu taka sytuacja si\u0119 nie zdarza, ale do cel\u00f3w demonstracyjnych jest to idealne rozwi\u0105zanie. <\/p>\n<p><\/p>\n<p>We\u017amy mapowanie do odczytu dw\u00f3ch tabel w jednej bazie danych Oracle. A wyniki odczytu niech b\u0119d\u0105 zapisywane w tabeli w tej samej bazie. Schemat mapowania b\u0119dzie wygl\u0105da\u0142 nast\u0119puj\u0105co:<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/e5bdacf6d7b0c3dbffd56c4876515520.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>W postaci mapowania w Informatica BDM 10.2.1 wygl\u0105da to w ten spos\u00f3b:<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/5e7e1d81f0eac539aaec1c21717341e7.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p><strong>Typ pushdown \u2013 native<\/strong><\/p>\n<p><\/p>\n<p>Je\u015bli wybierzemy typ pushdown native, mapowanie zostanie wykonane na <a class=\"wpil_keyword_link\" href=\"https:\/\/prohoster.info\/server\/dts-dronten\/\"   title=\"serwerze\" data-wpil-keyword-link=\"linked\"  data-wpil-monitor-id=\"2457\">serwerze<\/a> Informatica. Dane zostan\u0105 odczytane z serwera Oracle, przeniesione na serwer Informatica, tam przekszta\u0142cone i przekazane do Hadoop. Innymi s\u0142owy, otrzymamy standardowy proces ETL.<\/p>\n<p><\/p>\n<p><strong>Typ pushdown \u2013 source <\/strong><\/p>\n<p><\/p>\n<p>W przypadku wyboru typu source zyskujemy mo\u017cliwo\u015b\u0107 rozdzielenia naszego procesu mi\u0119dzy <a class=\"wpil_keyword_link\" href=\"https:\/\/prohoster.info\/server\/dts-prohoster\/\"   title=\"serwerem\" data-wpil-keyword-link=\"linked\"  data-wpil-monitor-id=\"2959\">serwerem<\/a> bazy danych (BDB) a Hadoop. W trakcie realizacji procesu z tym ustawieniem do bazy b\u0119d\u0105 wysy\u0142ane zapytania o odczyt danych z tabel. A reszta b\u0119dzie realizowana w formie krok\u00f3w w Hadoop.<br \/>\nSchemat wykonania b\u0119dzie wygl\u0105da\u0142 tak:<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/8b3b071ea0580394b222da033effceee.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>Poni\u017cej znajduje si\u0119 przyk\u0142ad ustawienia \u015brodowiska wykonawczego.<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/da7434ae71f4b2265f61fd31e182897e.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>W tym przypadku mapowanie b\u0119dzie realizowane w dw\u00f3ch krokach. W jego ustawieniach zobaczymy, \u017ce przekszta\u0142ci\u0142o si\u0119 w skrypt, kt\u00f3ry zostanie wys\u0142any do \u017ar\u00f3d\u0142a. Po\u0142\u0105czenie tabel i przekszta\u0142cenie danych zostanie zrealizowane w formie nadpisanego zapytania w \u017ar\u00f3dle.<br \/>\nNa poni\u017cszym obrazku widzimy zoptymalizowane mapowanie w BDM, a w \u017ar\u00f3dle \u2013 nadpisane zapytanie.<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/c0e7534b06d2e09785ad8a6c5df15f6f.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>Rola Hadoop w tej konfiguracji sprowadza si\u0119 do zarz\u0105dzania przep\u0142ywem danych \u2013 dyrygowania nimi. Wynik zapytania b\u0119dzie kierowany do Hadoop. Po zako\u0144czeniu odczytu plik z Hadoop zostanie zapisany w odbiorniku.<\/p>\n<p><\/p>\n<p><strong>Typ pushdown \u2013 full <\/strong><\/p>\n<p><\/p>\n<p>W przypadku wyboru typu full mapowanie ca\u0142kowicie przekszta\u0142ca si\u0119 w zapytanie do bazy danych. A wynik zapytania b\u0119dzie kierowany do Hadoop. Schemat takiego procesu przedstawiono poni\u017cej.<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/bfbb3f593a7053a0157d481d9b3bce83.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>Przyk\u0142ad ustawienia przedstawiono poni\u017cej.<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/31c70c7fb10996d5a506c6a4618f5f2f.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>W rezultacie otrzymamy zoptymalizowane mapowanie podobne do poprzedniego. R\u00f3\u017cnica polega jedynie na tym, \u017ce ca\u0142a logika przenosi si\u0119 na odbiornik w postaci nadpisania jego wstawienia. Przyk\u0142ad zoptymalizowanego mapowania przedstawiono poni\u017cej.<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/edabf7ab6eba768849d096a4319e5126.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>Podobnie jak w poprzednim przypadku, Hadoop pe\u0142ni rol\u0119 dyrygenta. Tutaj jednak odczyt \u017ar\u00f3d\u0142a odbywa si\u0119 w ca\u0142o\u015bci, a nast\u0119pnie na poziomie odbiornika wykonywana jest logika przetwarzania danych.<\/p>\n<p><\/p>\n<p><strong>Typ pushdown \u2013 null<\/strong><\/p>\n<p><\/p>\n<p>Ostatnia opcja to typ pushdown, w kt\u00f3rym nasze mapowanie przekszta\u0142ci si\u0119 w skrypt na Hadoop.<\/p>\n<p><\/p>\n<p>Optymalizowane mapowanie b\u0119dzie teraz wygl\u0105da\u0107 nast\u0119puj\u0105co:<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"Jak tanio i szybko przenosi\u0107, \u0142adowa\u0107 i integrowa\u0107 bardzo du\u017ce dane? Czym jest optymalizacja pushdown?\" src=\"\/wp-content\/uploads\/2019\/03\/deb8311403d4e95c2fef06d3b5c94e64.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><\/p>\n<p>Tutaj dane z plik\u00f3w \u017ar\u00f3d\u0142owych najpierw b\u0119d\u0105 odczytane na Hadoop. Nast\u0119pnie za pomoc\u0105 jego narz\u0119dzi te dwa pliki zostan\u0105 po\u0142\u0105czone. Po tym dane zostan\u0105 przekszta\u0142cone i za\u0142adowane do bazy danych.<\/p>\n<p><\/p>\n<p>Rozumiej\u0105c zasady optymalizacji pushdown, mo\u017cna bardzo efektywnie zorganizowa\u0107 wiele proces\u00f3w pracy z du\u017cymi danymi. Na przyk\u0142ad niedawno jedna du\u017c\u0105 firma w ci\u0105gu zaledwie kilku tygodni wyeksportowa\u0142a z magazynu w Hadoop ogromne dane, kt\u00f3re wcze\u015bniej gromadzi\u0142a przez kilka lat.<\/p>\n<p>\u0179r\u00f3d\u0142o: <a content=\"nofollow\" rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/post\/445240\/\">habr.com<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"<p>\u041b\u044e\u0431\u0430\u044f \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u044f \u0441 \u0431\u043e\u043b\u044c\u0448\u0438\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u043c\u0438 \u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0438\u0445 \u0432\u044b\u0447\u0438\u0441\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u0435\u0439. \u041e\u0431\u044b\u0447\u043d\u043e\u0435 \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0435\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0437 \u0431\u0430\u0437\u044b \u043d\u0430 Hadoop \u043c\u043e\u0436\u0435\u0442 \u0434\u043b\u0438\u0442\u044c\u0441\u044f \u043d\u0435\u0434\u0435\u043b\u044f\u043c\u0438 \u0438\u043b\u0438 \u0441\u0442\u043e\u0438\u0442\u044c, \u043a\u0430\u043a \u043a\u0440\u044b\u043b\u043e \u0441\u0430\u043c\u043e\u043b\u0451\u0442\u0430. \u041d\u0435 \u0445\u043e\u0442\u0438\u0442\u0435 \u0436\u0434\u0430\u0442\u044c \u0438 \u0442\u0440\u0430\u0442\u0438\u0442\u044c\u0441\u044f? \u0421\u0431\u0430\u043b\u0430\u043d\u0441\u0438\u0440\u0443\u0439\u0442\u0435 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u043d\u0430 \u0440\u0430\u0437\u043d\u044b\u0435 \u043f\u043b\u0430\u0442\u0444\u043e\u0440\u043c\u044b. \u041e\u0434\u0438\u043d \u0438\u0437 \u0441\u043f\u043e\u0441\u043e\u0431\u043e\u0432 \u2013 pushdown-\u043e\u043f\u0442\u0438\u043c\u0438\u0437\u0430\u0446\u0438\u044f. \u042f \u043f\u043e\u043f\u0440\u043e\u0441\u0438\u043b \u0432\u0435\u0434\u0443\u0449\u0435\u0433\u043e \u0432 \u0420\u043e\u0441\u0441\u0438\u0438 \u0442\u0440\u0435\u043d\u0435\u0440\u0430 \u043f\u043e \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0438 \u0430\u0434\u043c\u0438\u043d\u0438\u0441\u0442\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044e \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432 Informatica \u0410\u043b\u0435\u043a\u0441\u0435\u044f \u0410\u043d\u0430\u043d\u044c\u0435\u0432\u0430 \u0440\u0430\u0441\u0441\u043a\u0430\u0437\u0430\u0442\u044c \u043e [&hellip;]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[10],"tags":[],"class_list":["post-30268","post","type-post","status-publish","format-standard","hentry","category-blog"],"aioseo_notices":[],"aioseo_head":"\n\t\t<!-- All in One SEO 5.0.1.1 - aioseo.com -->\n\t<meta name=\"description\" content=\"\u041b\u044e\u0431\u0430\u044f \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u044f \u0441 \u0431\u043e\u043b\u044c\u0448\u0438\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u043c\u0438 \u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0438\u0445 \u0432\u044b\u0447\u0438\u0441\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u0435\u0439. \u041e\u0431\u044b\u0447\u043d\u043e\u0435 \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0435\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0437 \u0431\u0430\u0437\u044b \u043d\u0430 Hadoop \u043c\u043e\u0436\u0435\u0442 \u0434\u043b\u0438\u0442\u044c\u0441\u044f \u043d\u0435\u0434\u0435\u043b\u044f\u043c\u0438 \u0438\u043b\u0438 \u0441\u0442\u043e\u0438\u0442\u044c, \u043a\u0430\u043a \u043a\u0440\u044b\u043b\u043e \u0441\u0430\u043c\u043e\u043b\u0451\u0442\u0430.\" \/>\n\t<meta name=\"robots\" content=\"max-image-preview:large\" \/>\n\t<meta name=\"author\" content=\"Yuri Gagarin\"\/>\n\t<link rel=\"canonical\" href=\"https:\/\/prohoster.info\/pl\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya\" \/>\n\t<meta name=\"generator\" content=\"All in One SEO (AIOSEO) 5.0.1.1\" \/>\n\t\t<meta property=\"og:locale\" content=\"pl_PL\" \/>\n\t\t<meta property=\"og:site_name\" content=\"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b\" \/>\n\t\t<meta property=\"og:type\" content=\"article\" \/>\n\t\t<meta property=\"og:title\" content=\"\ud83e\udd47\u041a\u0430\u043a \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0430\u0442\u044c, \u0432\u044b\u0433\u0440\u0443\u0436\u0430\u0442\u044c \u0438 \u0438\u043d\u0442\u0435\u0433\u0440\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043e\u0447\u0435\u043d\u044c \u0431\u043e\u043b\u044c\u0448\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0434\u0451\u0448\u0435\u0432\u043e \u0438 \u0431\u044b\u0441\u0442\u0440\u043e? \u0427\u0442\u043e \u0442\u0430\u043a\u043e\u0435 pushdown-\u043e\u043f\u0442\u0438\u043c\u0438\u0437\u0430\u0446\u0438\u044f? | ProHoster\" \/>\n\t\t<meta property=\"og:description\" content=\"\u041b\u044e\u0431\u0430\u044f \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u044f \u0441 \u0431\u043e\u043b\u044c\u0448\u0438\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u043c\u0438 \u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0438\u0445 \u0432\u044b\u0447\u0438\u0441\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u0435\u0439. \u041e\u0431\u044b\u0447\u043d\u043e\u0435 \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0435\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0437 \u0431\u0430\u0437\u044b \u043d\u0430 Hadoop \u043c\u043e\u0436\u0435\u0442 \u0434\u043b\u0438\u0442\u044c\u0441\u044f \u043d\u0435\u0434\u0435\u043b\u044f\u043c\u0438 \u0438\u043b\u0438 \u0441\u0442\u043e\u0438\u0442\u044c, \u043a\u0430\u043a \u043a\u0440\u044b\u043b\u043e \u0441\u0430\u043c\u043e\u043b\u0451\u0442\u0430.\" \/>\n\t\t<meta property=\"og:url\" content=\"https:\/\/prohoster.info\/pl\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya\" \/>\n\t\t<meta property=\"og:image\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:secure_url\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:width\" content=\"350\" \/>\n\t\t<meta property=\"og:image:height\" content=\"350\" \/>\n\t\t<meta property=\"article:published_time\" content=\"2019-10-31T18:34:35+00:00\" \/>\n\t\t<meta property=\"article:modified_time\" content=\"2019-10-31T18:34:35+00:00\" \/>\n\t\t<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<meta property=\"article:author\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<!-- All in One SEO -->\n\n","aioseo_head_json":{"title":"\ud83e\udd47Jak przenosi\u0107, eksportowa\u0107 i integrowa\u0107 bardzo du\u017ce dane tanio i szybko? Czym jest optymalizacja pushdown? | ProHoster","description":"Ka\u017cda operacja z du\u017cymi danymi wymaga du\u017cych mocy obliczeniowych. Zwyk\u0142e przeniesienie danych z bazy do Hadoop mo\u017ce trwa\u0107 tygodniami lub kosztowa\u0107 tyle co skrzyd\u0142o samolotu.","canonical_url":"https:\/\/prohoster.info\/pl\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"pl_PL","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041a\u0430\u043a \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0430\u0442\u044c, \u0432\u044b\u0433\u0440\u0443\u0436\u0430\u0442\u044c \u0438 \u0438\u043d\u0442\u0435\u0433\u0440\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043e\u0447\u0435\u043d\u044c \u0431\u043e\u043b\u044c\u0448\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0434\u0451\u0448\u0435\u0432\u043e \u0438 \u0431\u044b\u0441\u0442\u0440\u043e? \u0427\u0442\u043e \u0442\u0430\u043a\u043e\u0435 pushdown-\u043e\u043f\u0442\u0438\u043c\u0438\u0437\u0430\u0446\u0438\u044f? | ProHoster","og:description":"\u041b\u044e\u0431\u0430\u044f \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u044f \u0441 \u0431\u043e\u043b\u044c\u0448\u0438\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u043c\u0438 \u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0438\u0445 \u0432\u044b\u0447\u0438\u0441\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u0435\u0439. \u041e\u0431\u044b\u0447\u043d\u043e\u0435 \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0435\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0437 \u0431\u0430\u0437\u044b \u043d\u0430 Hadoop \u043c\u043e\u0436\u0435\u0442 \u0434\u043b\u0438\u0442\u044c\u0441\u044f \u043d\u0435\u0434\u0435\u043b\u044f\u043c\u0438 \u0438\u043b\u0438 \u0441\u0442\u043e\u0438\u0442\u044c, \u043a\u0430\u043a \u043a\u0440\u044b\u043b\u043e \u0441\u0430\u043c\u043e\u043b\u0451\u0442\u0430.","og:url":"https:\/\/prohoster.info\/pl\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-10-31T18:34:35+00:00","article:modified_time":"2019-10-31T18:34:35+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"30268","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"Article","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-02-09 21:49:15","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-03-01 03:38:39","updated":"2026-02-09 21:49:15","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/posts\/30268","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/comments?post=30268"}],"version-history":[{"count":2,"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/posts\/30268\/revisions"}],"predecessor-version":[{"id":160240,"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/posts\/30268\/revisions\/160240"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/media?parent=30268"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/categories?post=30268"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/pl\/wp-json\/wp\/v2\/tags?post=30268"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}