{"id":90548,"date":"2020-08-02T13:42:53","date_gmt":"2020-08-02T11:42:53","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/reliz-platformy-dlya-raspredelyonnoj-obrabotki-dannyh-apache-hadoop-3-3"},"modified":"2020-08-02T13:42:53","modified_gmt":"2020-08-02T11:42:53","slug":"reliz-platformy-dlya-raspredelyonnoj-obrabotki-dannyh-apache-hadoop-3-3","status":"publish","type":"post","link":"https:\/\/prohoster.info\/nl\/blog\/news\/reliz-platformy-dlya-raspredelyonnoj-obrabotki-dannyh-apache-hadoop-3-3","title":{"rendered":"De release van het platform voor gedistribueerde gegevensverwerking Apache Hadoop 3.3","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Na anderhalf jaar ontwikkeling heeft de Apache Software Foundation heeft gepubliceerd<\/a><\/noindex> release Apache Hadoop 3.3.0<\/a><\/noindex>, een vrij platform voor gedistribueerde verwerking van grote hoeveelheden data met behulp van de map\/reduce<\/a><\/noindex>-paradigma, waarbij een taak wordt verdeeld in vele kleinere, afzonderlijke fragmenten die elk op een aparte knooppunt binnen het cluster kunnen worden uitgevoerd. De opslag op basis van Hadoop kan duizenden knooppunten beslaan en exabytes aan gegevens bevatten.<\/p>\n

Hadoop bevat een implementatie van het Hadoop Distributed Filesystem (HDFS), dat automatisch gegevensredundantie biedt en geoptimaliseerd is voor MapReduce-toepassingen. Om de toegang tot gegevens in de Hadoop-opslag te vereenvoudigen, is de database HBase en een SQL-achtige taal genaamd Pig ontwikkeld, die soort van SQL voor MapReduce is, waarvan de verzoeken parallel kunnen worden uitgevoerd en verwerkt door meerdere Hadoop-platformen. Het project wordt beoordeeld als volledig stabiel en klaar voor industri\u00eble toepassing. Hadoop wordt actief gebruikt in grote industri\u00eble projecten en biedt mogelijkheden die vergelijkbaar zijn met het Google Bigtable\/GFS\/MapReduce platform, terwijl Google officieel delegeerde<\/a><\/noindex> Hadoop en andere Apache-projecten het recht gegeven heeft om gebruik te maken van de technologie\u00ebn die onderhevig zijn aan patenten met betrekking tot de MapReduce-methode. <\/p>\n

Hadoop staat op de eerste plaats onder de Apache-repositories wat betreft het aantal wijzigingen en op de vijfde plaats wat betreft de grootte van de codebasis (ongeveer 4 miljoen regels code). Enkele grote implementaties van Hadoop zijn de opslagfaciliteiten van Netflix (meer dan 500 miljard gebeurtenissen per dag), Twitter (een cluster van 10.000 knooppunten dat in realtime meer dan een zettabyte aan gegevens opslaat en meer dan 5 miljard sessies per dag verwerkt), Facebook (een cluster van 4.000 knooppunten dat meer dan 300 petabyte opslaat en dagelijks met 4 PB toeneemt).<\/p>\n

Belangrijkste wijzigingen<\/a><\/noindex> in Apache Hadoop 3.3:<\/p>\n