{"id":34891,"date":"2019-10-31T22:01:07","date_gmt":"2019-10-31T19:01:07","guid":{"rendered":"https:\/\/prohoster.info\/blog\/dostupna-sistema-raspredelyonnyh-vychislenij-apache-storm-2-0\/"},"modified":"2019-10-31T22:01:07","modified_gmt":"2019-10-31T19:01:07","slug":"dostupna-sistema-raspredelyonnyh-vychislenij-apache-storm-2-0","status":"publish","type":"post","link":"https:\/\/prohoster.info\/da\/blog\/news\/dostupna-sistema-raspredelyonnyh-vychislenij-apache-storm-2-0","title":{"rendered":"Apache Storm 2.0 distribueret beregningssystem er tilg\u00e6ngeligt","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

S\u00e5 dagens lys<\/a><\/noindex> betydelig udgivelse af systemet til distribueret behandlingsbehandling af h\u00e6ndelser Apache Storm 2.0<\/a><\/noindex>, bem\u00e6rkelsesv\u00e6rdig med overgangen til en ny arkitektur, implementeret p\u00e5 Java i stedet for det tidligere anvendte sprog Clojure. <\/p>\n

Projektet muligg\u00f8r garanti for behandling af forskellige h\u00e6ndelser i realtid. For eksempel kan Storm anvendes til at analysere streaming data i realtid, udf\u00f8re opgaver til maskinl\u00e6ring, organisere kontinuerlige beregninger, implementere RPC, ETL osv. Systemet underst\u00f8tter clustering, oprettelse af fejlsikre konfigurationer, tilstand for garanteret databehandling og har h\u00f8j ydeevne, der er tilstr\u00e6kkelig til at h\u00e5ndtere mere end en million foresp\u00f8rgsler pr. sekund p\u00e5 en enkelt klynge node. <\/p>\n

Integration med forskellige k\u00f8behandlingssystemer og databaser underst\u00f8ttes. Storm-arkitekturen indeb\u00e6rer modtagelse og behandling af ustrukturerede, konstant opdaterede datastreams ved brug af vilk\u00e5rlige komplekse behandlere med mulighed for sektionering mellem de forskellige beregningsstadier. Projektet blev overgivet til Apache-samfundet efter, at Twitter opk\u00f8bte BackType, som oprindeligt udviklede rammev\u00e6rket. I praksis blev Storm anvendt i BackType til at analysere refleksionen af begivenheder i mikroblogging ved at matche nye tweets og de links, der anvendes i dem, i realtid (for eksempel blev der vurderet, hvordan eksterne links eller de Twitter-annoncer, der offentligg\u00f8res, retweetes af andre deltagere). <\/p>\n

Storm-funktionalitet sammenlignes med Hadoop-platformen, idet den vigtigste forskel er, at data ikke gemmes i et lager, men kommer udefra og behandles i realtid. I Storm er der ingen indbygget lag til lagring, og den analytiske foresp\u00f8rgsel anvendes p\u00e5 de indkommende data, indtil den annulleres (hvis der i Hadoop bruges tidskr\u00e6vende MapReduce-jobs, anvendes i Storm id\u00e9en om kontinuerligt k\u00f8rende 'topologier'). Behandlingerne kan distribueres p\u00e5 flere servere \u2014 Storm paralleliserer automatisk arbejdet med streams p\u00e5 forskellige noder i klyngen. <\/p>\n

Systemet blev oprindeligt skrevet i Clojure og k\u00f8rer p\u00e5 JVM virtuelle maskine. I Apache-fonden blev der startet initiativer for at portere Storm til en ny kerne, skrevet i Java, hvis resultater blev pr\u00e6senteret i Apache Storm 2.0. Alle grundl\u00e6ggende komponenter p\u00e5 platformen er blevet omskrevet i Java. St\u00f8tten til at skrive h\u00e5ndterere i Clojure er bevaret, men tilbydes nu i form af bindinger. For at k\u00f8re Storm 2.0.0 kr\u00e6ves Java 8. Modellen for multitr\u00e5det behandling er blevet fuldst\u00e6ndig redesignet, hvilket har muliggjort opn\u00e5s<\/a><\/noindex> en m\u00e6rkbar stigning i ydeevnen (for nogle topologier er forsinkelserne reduceret med 50-80%).<\/p>\n

\"Apache<\/a><\/noindex><\/center><\/p>\n

I den nye version er der ogs\u00e5 introduceret et nyt typet API Streams, der g\u00f8r det muligt at definere h\u00e5ndterere ved hj\u00e6lp af operationer i funktionel programmeringsstil. Det nye API er implementeret oven p\u00e5 den eksisterende basis-API og underst\u00f8tter automatisk sammenl\u00e6gning af operationer for at optimere deres behandling. I API Windowing til vinduesoperationer er der tilf\u00f8jet st\u00f8tte til at gemme og genskabe tilstand i backend. <\/p>\n

Planl\u00e6ggeren for k\u00f8rsel af h\u00e5ndterere har f\u00e5et tilf\u00f8jet st\u00f8tte til at tage h\u00f8jde for ekstra ressourcer ved beslutningstagning, som ikke kun er begr\u00e6nset til
\n CPU og hukommelse, men ogs\u00e5 netv\u00e6rksparametre og GPU. Der er foretaget et stort antal forbedringer i relation til integration med platformen Kafka<\/a><\/noindex>. Adgangskontrolsystemet er blevet udvidet, hvor der nu er mulighed for at oprette administratorgrupper og delegere tokens. Ogs\u00e5 forbedringer relateret til SQL og metrics er blevet tilf\u00f8jet. I administrationsgr\u00e6nsefladen er der kommet nye kommandoer til fejlfinding af clusterets tilstand.<\/p>\n

Anvendelsesomr\u00e5der for Storm:\n<\/p>\n