{"id":30268,"date":"2019-10-31T21:34:35","date_gmt":"2019-10-31T18:34:35","guid":{"rendered":"https:\/\/prohoster.info\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya\/"},"modified":"2019-10-31T21:34:35","modified_gmt":"2019-10-31T18:34:35","slug":"kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya","status":"publish","type":"post","link":"https:\/\/prohoster.info\/fr\/blog\/kak-peremeshhat-vygruzhat-i-integrirovat-ochen-bolshie-dannye-dyoshevo-i-bystro-chto-takoe-pushdown-optimizatsiya","title":{"rendered":"Comment d\u00e9placer, exporter et int\u00e9grer de tr\u00e8s grandes donn\u00e9es de mani\u00e8re \u00e9conomique et rapide ? Qu'est-ce que l'optimisation pushdown ?","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Toute op\u00e9ration sur de grandes donn\u00e9es n\u00e9cessite de puissantes capacit\u00e9s de calcul. Le simple transfert de donn\u00e9es d'une base vers Hadoop peut prendre des semaines ou co\u00fbter autant qu'une aile d'avion. Vous ne voulez pas attendre et d\u00e9penser ? \u00c9quilibrez la charge sur diff\u00e9rentes plateformes. L'une des m\u00e9thodes consiste \u00e0 utiliser l'optimisation par pushdown.<\/p>\n
<\/p>\n
J'ai demand\u00e9 au principal entra\u00eeneur en Russie pour le d\u00e9veloppement et l'administration des produits Informatica, Alexey Ananyev, de parler de la fonction d'optimisation par pushdown dans Informatica Big Data Management (BDM). Si vous avez d\u00e9j\u00e0 appris \u00e0 travailler avec les produits Informatica, c'est probablement Alexey qui vous a enseign\u00e9 les bases de PowerCenter et expliqu\u00e9 comment construire des mappings. <\/p>\n
<\/p>\n
Alexey Ananyev, responsable de la formation chez DIS Group<\/strong><\/p>\n
<\/p>\n
Qu'est-ce que le pushdown ?<\/strong><\/p>\n
<\/p>\n
Beaucoup d'entre vous connaissent d\u00e9j\u00e0 Informatica Big Data Management (BDM). Ce produit peut int\u00e9grer de grandes donn\u00e9es provenant de diff\u00e9rentes sources, les d\u00e9placer entre divers syst\u00e8mes, en assurer un acc\u00e8s facile, les profiler et bien plus encore. \nEntre de bonnes mains, BDM peut faire des merveilles : les t\u00e2ches seront ex\u00e9cut\u00e9es rapidement et avec un minimum de ressources informatiques. <\/p>\n
<\/p>\n
Vous souhaitez faire de m\u00eame ? Apprenez \u00e0 utiliser la fonction de pushdown dans BDM pour r\u00e9partir la charge de calcul entre diff\u00e9rentes plateformes. La technologie de pushdown permet de transformer un mapping en script et de choisir l'environnement dans lequel ce script sera ex\u00e9cut\u00e9. La possibilit\u00e9 de ce choix permet de combiner les forces de diff\u00e9rentes plateformes et d'atteindre leur performance maximale.<\/p>\n
<\/p>\n
Pour configurer l'environnement d'ex\u00e9cution du script, il faut choisir le type de pushdown. Le script peut \u00eatre compl\u00e8tement ex\u00e9cut\u00e9 sur Hadoop ou r\u00e9parti partiellement entre la source et le r\u00e9cepteur. Il y a 4 types possibles de pushdown. Le mapping peut rester sous forme de script (native). Le mapping peut \u00eatre ex\u00e9cut\u00e9 principalement sur la source (source) ou enti\u00e8rement sur la source (full). Le mapping peut \u00e9galement \u00eatre transform\u00e9 en script Hadoop (none).<\/p>\n