{"id":52513,"date":"2019-11-10T00:00:00","date_gmt":"2019-11-09T21:00:00","guid":{"rendered":"https:\/\/prohoster.info\/blog\/blog_prohoster\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2"},"modified":"2020-02-18T14:00:15","modified_gmt":"2020-02-18T11:00:15","slug":"obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pt\/blog\/news\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","title":{"rendered":"Atualiza\u00e7\u00e3o do sistema de arquivos de cluster LizardFS 3.13.0-rc2","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Ap\u00f3s um ano de interrup\u00e7\u00e3o no desenvolvimento foi reiniciado<\/a><\/noindex> o trabalho em um novo ramo de sistema de arquivos distribu\u00eddo tolerante a falhas LizardF 3.13<\/a><\/noindex> e foi publicado<\/a><\/noindex> segundo candidato para lan\u00e7amento. Recentemente houve uma<\/a><\/noindex> mudan\u00e7a de propriet\u00e1rios da empresa que desenvolve LizardFS, uma nova gest\u00e3o foi implantada e houve mudan\u00e7as nos desenvolvedores. Nos \u00faltimos dois anos, o projeto se afastou da comunidade e n\u00e3o lhe deu a devida aten\u00e7\u00e3o, mas a nova equipe pretende ressuscitar as antigas rela\u00e7\u00f5es com a comunidade e estabelecer uma intera\u00e7\u00e3o pr\u00f3xima. O c\u00f3digo do projeto \u00e9 escrito em C e C++ e \u00e9 distribu\u00eddo<\/a><\/noindex> sob licen\u00e7a GPLv3. <\/p>\n

LizardFS \u00e9<\/a><\/noindex> \u00e9 um sistema de arquivos de cluster distribu\u00eddo que permite espalhar dados em diferentes servidores, mas apresentar acesso a eles na forma de uma \u00fanica grande parti\u00e7\u00e3o, cujo manuseio \u00e9 feito de maneira semelhante \u00e0s parti\u00e7\u00f5es de disco tradicionais. Na parti\u00e7\u00e3o montada com LizardFS, s\u00e3o suportados atributos POSIX, ACL, bloqueios, sockets, canais, arquivos de dispositivo, links simb\u00f3licos e r\u00edgidos. O sistema n\u00e3o possui um \u00fanico ponto de falha, todos os componentes s\u00e3o redundantes. Suporta a paraleliza\u00e7\u00e3o de opera\u00e7\u00f5es com dados (v\u00e1rios clientes podem acessar arquivos simultaneamente).<\/p>\n

Para garantir a resili\u00eancia, os dados s\u00e3o divididos em r\u00e9plicas, que s\u00e3o distribu\u00eddas entre diferentes n\u00f3s com redund\u00e2ncia (v\u00e1rias c\u00f3pias s\u00e3o armazenadas em n\u00f3s diferentes); assim, em caso de falha de n\u00f3s ou unidades de armazenamento, o sistema continua operando sem perda de informa\u00e7\u00f5es e redistribui automaticamente os dados com base nos n\u00f3s restantes. Para expandir o armazenamento, basta conectar novos n\u00f3s sem interromper a opera\u00e7\u00e3o para manuten\u00e7\u00e3o (o sistema replicar\u00e1 parte dos dados nos novos servidores e equilibrar\u00e1 o armazenamento considerando os novos servidores). Da mesma forma, \u00e9 poss\u00edvel reduzir o tamanho do cluster \u2014 simplesmente desconectar equipamentos obsoletos que n\u00e3o s\u00e3o mais necess\u00e1rios.<\/p>\n

Os dados e metadados s\u00e3o armazenados separadamente. Para opera\u00e7\u00e3o, recomenda-se a instala\u00e7\u00e3o de dois servidores de metadados, funcionando em um modo master-slave, e pelo menos dois servidores de armazenamento de dados (chunkserver). Adicionalmente, para a redund\u00e2ncia dos metadados, podem ser aplicados servidores de log, que armazenam informa\u00e7\u00f5es sobre altera\u00e7\u00f5es nos metadados e permitem a recupera\u00e7\u00e3o do servi\u00e7o em caso de falha de todos os servidores de metadados dispon\u00edveis. Cada arquivo \u00e9 dividido em blocos (chunk) de at\u00e9 64 MB. Os blocos s\u00e3o distribu\u00eddos pelos servidores de armazenamento de acordo com o modo de replica\u00e7\u00e3o selecionado: padr\u00e3o (defini\u00e7\u00e3o expl\u00edcita do n\u00famero de c\u00f3pias a serem armazenadas em diferentes n\u00f3s, inclusive em rela\u00e7\u00e3o a diret\u00f3rios espec\u00edficos \u2014 para dados importantes, o n\u00famero de c\u00f3pias pode ser aumentado, enquanto para dados menos cr\u00edticos pode ser reduzido), XOR (RAID5) e EC (RAID6).<\/p>\n

O armazenamento pode ser escalado para tamanhos de petabytes. Entre as \u00e1reas de aplica\u00e7\u00e3o est\u00e3o a manuten\u00e7\u00e3o de arquivos de archive, armazenamento de imagens de m\u00e1quinas virtuais, dados multim\u00eddia, backups, utiliza\u00e7\u00e3o como DRC (Centro de Recupera\u00e7\u00e3o de Desastres) e como armazenamento em clusters de computa\u00e7\u00e3o de alto desempenho. O LizardFS oferece uma velocidade de leitura muito alta de arquivos de qualquer tamanho, e ao escrever, apresenta um bom desempenho ao gravar grandes e m\u00e9dios arquivos de uma vez, quando n\u00e3o h\u00e1 modifica\u00e7\u00e3o constante, trabalho intensivo com arquivos abertos e opera\u00e7\u00f5es \u00fanicas com um grande volume de pequenos arquivos.<\/p>\n

\"Atualiza\u00e7\u00e3o<\/a><\/noindex><\/center><\/p>\n

Entre as caracter\u00edsticas do FS, tamb\u00e9m se pode destacar o suporte a snapshots, que refletem o estado dos arquivos em um determinado momento, e a implementa\u00e7\u00e3o integrada da 'lixeira' (os arquivos n\u00e3o s\u00e3o exclu\u00eddos imediatamente e permanecem dispon\u00edveis para recupera\u00e7\u00e3o por algum tempo). O acesso \u00e0 se\u00e7\u00e3o pode ser limitado por endere\u00e7o IP ou senha (semelhante ao NFS). Existem mecanismos de cotas e gerenciamento de qualidade de servi\u00e7o que permitem restringir o tamanho e a largura de banda para algumas categorias de usu\u00e1rios. \u00c9 poss\u00edvel criar armazenamentos distribu\u00eddos territorialmente, cujos segmentos est\u00e3o localizados em diferentes datacenters. <\/p>\n

O projeto LizardFS foi fundado em 2013 como um fork MooseFS<\/a><\/noindex>, e se diferencia, principalmente, pela presen\u00e7a do modo de replica\u00e7\u00e3o baseado em c\u00f3digos de corre\u00e7\u00e3o de erros Reed-Solomon (semelhante ao raidzN), suporte ampliado a ACL, disponibilidade de um cliente para a plataforma Windows, otimiza\u00e7\u00f5es adicionais (por exemplo, ao combinar o cliente e o servidor de armazenamento, os blocos s\u00e3o, sempre que poss\u00edvel, fornecidos a partir do n\u00f3 atual, enquanto os metadados s\u00e3o armazenados em cache na mem\u00f3ria), um sistema de configura\u00e7\u00e3o mais flex\u00edvel, suporte \u00e0 leitura antecipada de dados, quotas para diret\u00f3rios e melhorias internas.<\/p>\n

O lan\u00e7amento do LizardFS 3.13.0 est\u00e1 previsto para o final de dezembro. A principal novidade do LizardFS 3.13 \u00e9 a utiliza\u00e7\u00e3o de um algoritmo de consenso para garantir a resist\u00eancia a falhas (mudan\u00e7a de servidores master em caso de falha). Raft<\/a><\/noindex> (uma implementa\u00e7\u00e3o pr\u00f3pria do uRaft \u00e9 utilizada, que anteriormente foi aplicada em produtos comerciais). O uso do uRaft simplifica a configura\u00e7\u00e3o e reduz o tempo de recupera\u00e7\u00e3o ap\u00f3s a falha, mas requer a presen\u00e7a de pelo menos tr\u00eas n\u00f3s operacionais, sendo um deles utilizado para o qu\u00f3rum. <\/p>\n

Entre outras mudan\u00e7as: um novo cliente baseado no subsistema FUSE3, solu\u00e7\u00e3o para problemas de corre\u00e7\u00e3o de erros, e o plugin nfs-ganesha reescrito em C. Na atualiza\u00e7\u00e3o 3.13.0-rc2, v\u00e1rios erros cr\u00edticos foram corrigidos, tornando as vers\u00f5es beta anteriores da branch 3.13 pouco utiliz\u00e1veis (as corre\u00e7\u00f5es para a branch 3.12 ainda n\u00e3o foram publicadas, e a atualiza\u00e7\u00e3o de 3.12 para 3.13 ainda resulta em perda total de dados).<\/p>\n

Em 2020, o foco ser\u00e1 na desenvolvimento
\nAgama<\/a><\/noindex>, um novo n\u00facleo completamente reescrito do LizardFS, que, segundo os desenvolvedores, proporcionar\u00e1 um aumento de tr\u00eas vezes no desempenho em compara\u00e7\u00e3o com a branch 3.12. Em Agama, a transi\u00e7\u00e3o para uma arquitetura orientada a eventos (event driven) ser\u00e1 realizada, com entrada\/sa\u00edda ass\u00edncrona baseada em asio<\/a><\/noindex>, e a opera\u00e7\u00e3o predominantemente no espa\u00e7o do usu\u00e1rio (para reduzir a depend\u00eancia dos mecanismos de cache do n\u00facleo). Al\u00e9m disso, uma nova subsistema de depura\u00e7\u00e3o e um analisador de atividade de rede com suporte para autoajuste de desempenho ser\u00e3o oferecidos. <\/p>\n

O cliente LizardFS ter\u00e1 suporte completo para versionamento de opera\u00e7\u00f5es de grava\u00e7\u00e3o, o que aumentar\u00e1 a confiabilidade na recupera\u00e7\u00e3o de falhas, resolver\u00e1 problemas decorrentes do acesso simult\u00e2neo de diferentes clientes aos mesmos dados e permitir\u00e1 um aumento significativo de desempenho. O cliente ser\u00e1 transferido para um subsistema de rede pr\u00f3prio, operando no espa\u00e7o do usu\u00e1rio. O primeiro prot\u00f3tipo funcional do LizardFS baseado em Agama est\u00e1 previsto para ser preparado no segundo trimestre de 2020. Tamb\u00e9m se promete implementar ferramentas para integrar o LizardFS com a plataforma Kubernetes.<\/p>\n

<\/a><\/noindex><\/p>\n

Fonte: opennet.ru<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041f\u043e\u0441\u043b\u0435 \u0433\u043e\u0434\u0438\u0447\u043d\u043e\u0433\u043e \u0437\u0430\u0442\u0438\u0448\u044c\u044f \u0432 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0432\u043e\u0437\u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0430\u0441\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430\u0434 \u043d\u043e\u0432\u043e\u0439 \u0432\u0435\u0442\u043a\u043e\u0439 \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b LizardF 3.13 \u0438 \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043d \u0432\u0442\u043e\u0440\u043e\u0439 \u043a\u0430\u043d\u0434\u0430\u0434\u0430\u0442 \u0432 \u0440\u0435\u043b\u0438\u0437\u044b. \u041d\u0435\u0434\u0430\u0432\u043d\u043e \u043f\u0440\u043e\u0438\u0437\u043e\u0448\u043b\u0430 \u0441\u043c\u0435\u043d\u0430 \u0432\u043b\u0430\u0434\u0435\u043b\u044c\u0446\u0435\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438, \u0440\u0430\u0437\u0432\u0438\u0432\u0430\u044e\u0449\u0435\u0439 LizardFS, \u0431\u044b\u043b\u043e \u043f\u0440\u0438\u043d\u044f\u0442\u043e \u043d\u043e\u0432\u043e\u0435 \u0440\u0443\u043a\u043e\u0432\u043e\u0434\u0441\u0442\u0432\u043e \u0438 \u0441\u043c\u0435\u043d\u0438\u043b\u0438\u0441\u044c \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u0438. \u041f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u0435 \u0434\u0432\u0430 \u0433\u043e\u0434\u0430 \u043f\u0440\u043e\u0435\u043a\u0442 \u043e\u0442\u0441\u0442\u0440\u0430\u043d\u0438\u043b\u0441\u044f \u043e\u0442 \u0441\u043e\u043e\u0431\u0449\u0435\u0441\u0442\u0432\u0430 \u0438 \u043d\u0435 \u0443\u0434\u0435\u043b\u044f\u043b \u0435\u043c\u0443 \u0434\u043e\u043b\u0436\u043d\u043e\u0433\u043e \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u044f, \u043d\u043e \u043d\u043e\u0432\u0430\u044f \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043d\u0430\u043c\u0435\u0440\u0435\u043d\u0430 \u0432\u043e\u0437\u0440\u043e\u0434\u0438\u0442\u044c \u043f\u0440\u0435\u0436\u043d\u0438\u0435 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":52514,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-52513","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-news"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47 Atualiza\u00e7\u00e3o do sistema de arquivos em cluster LizardFS 3.13.0-rc2 | ProHoster","description":"Ap\u00f3s um ano de paralisa\u00e7\u00e3o no desenvolvimento, o trabalho sobre um novo ramo de sistema de arquivos distribu\u00eddo tolerante a falhas foi reiniciado.","canonical_url":"https:\/\/prohoster.info\/pt\/blog\/news\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"pt_PT","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b LizardFS 3.13.0-rc2 | ProHoster","og:description":"\u041f\u043e\u0441\u043b\u0435 \u0433\u043e\u0434\u0438\u0447\u043d\u043e\u0433\u043e \u0437\u0430\u0442\u0438\u0448\u044c\u044f \u0432 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0432\u043e\u0437\u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0430\u0441\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430\u0434 \u043d\u043e\u0432\u043e\u0439 \u0432\u0435\u0442\u043a\u043e\u0439 \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439.","og:url":"https:\/\/prohoster.info\/pt\/blog\/news\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-11-09T21:00:00+00:00","article:modified_time":"2020-02-18T11:00:15+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"52513","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-24 03:51:39","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 17:15:56","updated":"2026-01-24 03:51:39","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/posts\/52513","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/comments?post=52513"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/posts\/52513\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/media\/52514"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/media?parent=52513"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/categories?post=52513"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/tags?post=52513"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}