{"id":52513,"date":"2019-11-10T00:00:00","date_gmt":"2019-11-09T21:00:00","guid":{"rendered":"https:\/\/prohoster.info\/blog\/blog_prohoster\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2"},"modified":"2020-02-18T14:00:15","modified_gmt":"2020-02-18T11:00:15","slug":"obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","status":"publish","type":"post","link":"https:\/\/prohoster.info\/de\/blog\/news\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","title":{"rendered":"Update des Cluster-Dateisystems LizardFS 3.13.0-rc2","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Nach einer einj\u00e4hrigen Ruhephase in der Entwicklung wurde wieder aufgenommen<\/a><\/noindex> die Arbeit an der neuen Version des fehlertoleranten verteilten Dateisystems LizardF 3.13<\/a><\/noindex> und ver\u00f6ffentlicht<\/a><\/noindex> der zweite Kandidat f\u00fcr die Releases. Vor kurzem ereignete sich<\/a><\/noindex> gab es einen Eigent\u00fcmerwechsel bei der Firma, die LizardFS entwickelt. Es wurde eine neue Leitung ernannt und die Entwickler haben gewechselt. In den letzten zwei Jahren hatte das Projekt keinen Kontakt zur Community und schenkte ihr nicht die n\u00f6tige Aufmerksamkeit, doch das neue Team plant, die fr\u00fcheren Beziehungen zur Community wiederzubeleben und eine enge Zusammenarbeit zu etablieren. Der Code des Projekts ist in C und C++ geschrieben und wird verbreitet<\/a><\/noindex> unter der GPLv3-Lizenz. <\/p>\n

LizardFS ist<\/a><\/noindex> ist ein verteiltes Cluster-Dateisystem, das es erm\u00f6glicht, Daten \u00fcber verschiedene Server zu verteilen und dennoch den Zugriff in Form eines einzelnen gro\u00dfen Volumes zu pr\u00e4sentieren, dessen Verwaltung analog zu traditionellen Festplattenschnittstellen erfolgt. Im eingeh\u00e4ngten Volume mit LizardFS werden POSIX-Dateiattribute, ACLs, Sperren, Sockets, Pipes, Ger\u00e4tedateien sowie symbolische und harte Links unterst\u00fctzt. Das System hat keinen einzelnen Punkt des Ausfalls, alle Komponenten werden redundant gehalten. Es wird die Parallelit\u00e4t bei Datenoperationen unterst\u00fctzt (mehrere Clients k\u00f6nnen gleichzeitig auf Dateien zugreifen).<\/p>\n

Um die Ausfallsicherheit zu gew\u00e4hrleisten, werden Daten in Replikate aufgeteilt, die auf verschiedene Knoten mit Redundanz verteilt werden (auf verschiedenen Knoten werden mehrere Kopien platziert). Im Falle eines Ausfalls von Knoten oder Speicherger\u00e4ten kann das System weiterhin ohne Informationsverlust arbeiten und verteilt die Daten automatisch unter Ber\u00fccksichtigung der verbleibenden Knoten neu. Um den Speicher zu erweitern, gen\u00fcgt es, neue Knoten anzuschlie\u00dfen, ohne den Betrieb f\u00fcr Wartungsarbeiten zu unterbrechen (das System repliziert selbstst\u00e4ndig einen Teil der Daten auf neue Server und passt den Speicher entsprechend den neuen Servern an). Entsprechend kann man auch die Clustergr\u00f6\u00dfe reduzieren \u2013 veraltete Hardware kann einfach aus dem Betrieb genommen werden.<\/p>\n

Daten und Metadaten werden getrennt gespeichert. Es wird empfohlen, zwei Metadaten-Server im Master-Slave-Modus zu installieren und mindestens zwei Serverspeicher (Chunkserver). Dar\u00fcber hinaus k\u00f6nnen zur Redundanz von Metadaten Log-Server eingesetzt werden, die Informationen \u00fcber die \u00c4nderungen der Metadaten speichern und eine Wiederherstellung erm\u00f6glichen, falls alle vorhandenen Metadaten-Server besch\u00e4digt werden. Jede Datei wird in Bl\u00f6cke (Chunks) von bis zu 64 MB aufgeteilt. Die Bl\u00f6cke werden entsprechend dem gew\u00e4hlten Replikationsmodus auf die Speicherserver verteilt: Standard (explizite Definition der Anzahl der Kopien zur Verteilung auf verschiedene Knoten, einschlie\u00dflich der Bindung an bestimmte Verzeichnisse - f\u00fcr wichtige Daten kann die Anzahl der Kopien erh\u00f6ht und f\u00fcr unwichtige verringert werden), XOR (RAID5) und EC (RAID6).<\/p>\n

Der Speicher kann auf Petabyte-Gr\u00f6\u00dfen skalieren. Zu den Anwendungsbereichen geh\u00f6ren die Archivierung, Speicherung von Abbilden virtueller Maschinen, Multimedia-Daten, Backups sowie die Nutzung als DRC (Disaster Recovery Center) und als Speicher in Clustern f\u00fcr Hochleistungsrechner. LizardFS gew\u00e4hrleistet eine sehr hohe Lesegeschwindigkeit f\u00fcr Dateien jeder Gr\u00f6\u00dfe und zeigt beim Schreiben eine gute Leistung beim Schreiben ganzer gro\u00dfer und mittlerer Dateien, wenn keine st\u00e4ndige Modifikation, intensive Arbeiten mit offenen Dateien und sporadische Vorg\u00e4nge mit vielen kleinen Dateien stattfinden.<\/p>\n

\"Update<\/a><\/noindex><\/center><\/p>\n

Zu den Besonderheiten des Dateisystems geh\u00f6rt auch die Unterst\u00fctzung von Snapshots, die den Zustand von Dateien zu einem bestimmten Zeitpunkt widerspiegeln, sowie die eingebaute Implementierung eines 'Papierkorbs' (Dateien werden nicht sofort gel\u00f6scht und sind einige Zeit zur Wiederherstellung verf\u00fcgbar). Der Zugang zum Bereich kann nach IP-Adresse oder Passwort eingeschr\u00e4nkt werden (\u00e4hnlich wie bei NFS). Es gibt Mechanismen f\u00fcr Quoten und Qualit\u00e4tsmanagement, die die Gr\u00f6\u00dfe und Bandbreite f\u00fcr bestimmte Benutzergruppen begrenzen k\u00f6nnen. Es ist m\u00f6glich, geografisch verteilte Speicher zu erstellen, deren Segmente in verschiedenen Rechenzentren untergebracht sind. <\/p>\n

Das Projekt LizardFS wurde 2013 als Fork gegr\u00fcndet. MooseFS<\/a><\/noindex>, und unterscheidet sich haupts\u00e4chlich durch das Vorhandensein eines Replikationsmodus auf der Grundlage von Reed-Solomon-Fehlerkorrekturcodes (analog zu raidzN), erweiterte ACL-Unterst\u00fctzung, einem Windows-Client, zus\u00e4tzlichen Optimierungen (zum Beispiel werden bei der Kombination von Client und Speicherserver die Bl\u00f6cke nach M\u00f6glichkeit vom aktuellen Knoten bereitgestellt, w\u00e4hrend die Metadaten im Speicher zwischengespeichert werden), einem flexibleren Konfiguration System, Unterst\u00fctzung f\u00fcr vorzeitiges Lesen von Daten, Quotas f\u00fcr Verzeichnisse und internen \u00dcberarbeitungen.<\/p>\n

Die Ver\u00f6ffentlichung von LizardFS 3.13.0 ist f\u00fcr Ende Dezember geplant. Die Hauptneuheit von LizardFS 3.13 ist die Verwendung eines Konsensalgorithmus zur Gew\u00e4hrleistung der Ausfallsicherheit (Umschaltung von Master-Servern im Falle eines Ausfalls). Raft<\/a><\/noindex> (es wird eine propriet\u00e4re Implementierung von uRaft verwendet, die zuvor in kommerziellen Produkten eingesetzt wurde). Die Verwendung von uRaft vereinfacht die Konfiguration und reduziert die Latenz beim Wiederherstellen nach einem Ausfall, erfordert jedoch mindestens drei funktionierende Knoten, von denen einer f\u00fcr das Quorum verwendet wird. <\/p>\n

Zu den weiteren \u00c4nderungen geh\u00f6ren: ein neuer Client auf Basis des FUSE3-Subsystems, die L\u00f6sung von Fehlerkorrekturproblemen, das Plugin nfs-ganesha wurde in C neu geschrieben. In dem Update 3.13.0-rc2 wurden mehrere kritische Fehler behoben, die die vorherigen Testversionen des Zweigs 3.13 unbrauchbar machten (Korrekturen f\u00fcr den Zweig 3.12 wurden noch nicht ver\u00f6ffentlicht, und ein Update von 3.12 auf 3.13 f\u00fchrt weiterhin zu einem vollst\u00e4ndigen Datenverlust).<\/p>\n

Im Jahr 2020 wird die Arbeit auf die Entwicklung
\nAgama<\/a><\/noindex>, eines neuen, vollst\u00e4ndig neu geschriebenen Kerns von LizardFS konzentriert, der laut den Entwicklern eine dreifache Leistungssteigerung im Vergleich zum Zweig 3.12 bieten wird. In Agama wird der \u00dcbergang zu einer ereignisgesteuerten Architektur (event driven) sowie asynchroner Ein- \/ Ausgabe auf der Basis von asio<\/a><\/noindex>, \u00fcberwiegend im Benutzerspeicher stattfinden (um die Abh\u00e4ngigkeit von den Caching-Mechanismen des Kernels zu verringern). Zus\u00e4tzlich werden ein neues Debugging-Subsystem und ein Analysewerkzeug f\u00fcr die Netzwerkaktivit\u00e4t mit Unterst\u00fctzung f\u00fcr die automatische Leistungsoptimierung angeboten. <\/p>\n

Im LizardFS-Client wird umfassende Unterst\u00fctzung f\u00fcr die Versionsverwaltung von Schreiboperationen hinzugef\u00fcgt, was die Zuverl\u00e4ssigkeit der Wiederherstellung nach einem Ausfall verbessert, Probleme l\u00f6st, die beim gleichzeitigen Zugriff verschiedener Clients auf dieselben Daten auftreten, und eine erhebliche Steigerung der Leistung erm\u00f6glicht. Der Client wird auf ein eigenes NetzwerkSubsystem umgestellt, das im Benutzerspeicher arbeitet. Der erste funktionale Prototyp von LizardFS auf Basis von Agama soll im zweiten Quartal 2020 fertiggestellt werden. Gleichzeitig wird versprochen, Mittel zur Integration von LizardFS mit der Kubernetes-Plattform bereitzustellen.<\/p>\n

<\/a><\/noindex><\/p>\n

Quelle: opennet.ru<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041f\u043e\u0441\u043b\u0435 \u0433\u043e\u0434\u0438\u0447\u043d\u043e\u0433\u043e \u0437\u0430\u0442\u0438\u0448\u044c\u044f \u0432 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0432\u043e\u0437\u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0430\u0441\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430\u0434 \u043d\u043e\u0432\u043e\u0439 \u0432\u0435\u0442\u043a\u043e\u0439 \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b LizardF 3.13 \u0438 \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043d \u0432\u0442\u043e\u0440\u043e\u0439 \u043a\u0430\u043d\u0434\u0430\u0434\u0430\u0442 \u0432 \u0440\u0435\u043b\u0438\u0437\u044b. \u041d\u0435\u0434\u0430\u0432\u043d\u043e \u043f\u0440\u043e\u0438\u0437\u043e\u0448\u043b\u0430 \u0441\u043c\u0435\u043d\u0430 \u0432\u043b\u0430\u0434\u0435\u043b\u044c\u0446\u0435\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438, \u0440\u0430\u0437\u0432\u0438\u0432\u0430\u044e\u0449\u0435\u0439 LizardFS, \u0431\u044b\u043b\u043e \u043f\u0440\u0438\u043d\u044f\u0442\u043e \u043d\u043e\u0432\u043e\u0435 \u0440\u0443\u043a\u043e\u0432\u043e\u0434\u0441\u0442\u0432\u043e \u0438 \u0441\u043c\u0435\u043d\u0438\u043b\u0438\u0441\u044c \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u0438. \u041f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u0435 \u0434\u0432\u0430 \u0433\u043e\u0434\u0430 \u043f\u0440\u043e\u0435\u043a\u0442 \u043e\u0442\u0441\u0442\u0440\u0430\u043d\u0438\u043b\u0441\u044f \u043e\u0442 \u0441\u043e\u043e\u0431\u0449\u0435\u0441\u0442\u0432\u0430 \u0438 \u043d\u0435 \u0443\u0434\u0435\u043b\u044f\u043b \u0435\u043c\u0443 \u0434\u043e\u043b\u0436\u043d\u043e\u0433\u043e \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u044f, \u043d\u043e \u043d\u043e\u0432\u0430\u044f \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043d\u0430\u043c\u0435\u0440\u0435\u043d\u0430 \u0432\u043e\u0437\u0440\u043e\u0434\u0438\u0442\u044c \u043f\u0440\u0435\u0436\u043d\u0438\u0435 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":52514,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-52513","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-news"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Aktualisierung des Cluster-Dateisystems LizardFS 3.13.0-rc2 | ProHoster","description":"Nach einem einj\u00e4hrigen Stillstand in der Entwicklung wurde die Arbeit an einem neuen Branch f\u00fcr fehlertolerante, verteilte Dateisysteme wieder aufgenommen.","canonical_url":"https:\/\/prohoster.info\/de\/blog\/news\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"de_DE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b LizardFS 3.13.0-rc2 | ProHoster","og:description":"\u041f\u043e\u0441\u043b\u0435 \u0433\u043e\u0434\u0438\u0447\u043d\u043e\u0433\u043e \u0437\u0430\u0442\u0438\u0448\u044c\u044f \u0432 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0432\u043e\u0437\u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0430\u0441\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430\u0434 \u043d\u043e\u0432\u043e\u0439 \u0432\u0435\u0442\u043a\u043e\u0439 \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439.","og:url":"https:\/\/prohoster.info\/de\/blog\/news\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-11-09T21:00:00+00:00","article:modified_time":"2020-02-18T11:00:15+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"52513","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-24 03:51:39","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 17:15:56","updated":"2026-01-24 03:51:39","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/52513","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/comments?post=52513"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/52513\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media\/52514"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media?parent=52513"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/categories?post=52513"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/tags?post=52513"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}