Armazenamento, backup e catalogação de fotografias

Aqui, periodicamente, escrevem posts sobre como armazenar e fazer backup de suas fotos — e também de outros arquivos. No último desses posts, escrevi um comentário bastante longo, pensei um pouco e decidi expandi-lo em um post. Além disso, mudei um pouco meu método de backup na nuvem, pode ser útil para alguém.

Casa servidor, onde ocorre muito do que está descrito abaixo:

Armazenamento, backup e catalogação de fotografias

O que é necessário salvar?

O mais importante e volumoso para mim são as fotos. Raramente gravo vídeos, mas muito raramente — eles ocupam muito espaço e consomem muito tempo, por isso não gosto muito, costumo filmar apenas clipes curtos que ficam na mesma pilha das fotos. Atualmente, meu arquivo de fotos ocupa cerca de 1,6 terabyte e cresce cerca de 200 gigabytes por ano. Outras coisas importantes consumem muito menos espaço e não há tantas questões em termos de armazenamento e backup; uma dezena ou duas de gigabytes podem ser espalhadas por diversos locais gratuitos ou muito baratos, desde DVDs até pen drives e nuvens.

Como é armazenado e feito o backup?

Todo o meu arquivo de fotos ocupa cerca de 1,6 terabyte no momento. A cópia mestre é armazenada em um SSD de dois terabytes no computador de casa. Eu tento não manter fotos nos cartões de memória por mais tempo do que o necessário; assim que possível, transfiro para o desktop ou notebook (quando estou na estrada). Embora eu não exclua da pen drive se ainda houver espaço. Uma cópia extra nunca é demais. Após chegar em casa, tudo do notebook também é transferido para o desktop.

Armazenamento, backup e catalogação de fotografias

Diariamente, faço uma cópia da pasta com as fotos no servidor doméstico (com um tipo de espelho baseado em Drivepool, onde a duplicação de pastas importantes está configurada). A propósito, ainda recomendo o Drivepool — durante todos esses anos de uso, não tive nenhum problema. Funciona perfeitamente. Só não olhe para sua interface em russo, enviei aos desenvolvedores uma tradução mais decente, mas não sei quando será implementada. Por enquanto, em russo, este programa é para gerenciar piscina (manage pool).

Armazenamento, backup e catalogação de fotografias

Claro, também é possível fazer cópias mais frequentemente; se eu fizer muito trabalho em um dia, posso iniciar a tarefa manualmente. Embora agora esteja pensando em configurar a cópia para ser acionada quando os arquivos forem alterados; quero parar de deixar o desktop ligado 24 horas por dia, deixando o servidor trabalhar mais. O programa — GoodSync.

Armazenamento, backup e catalogação de fotografias

Até recentemente, no mesmo desktop, os arquivos eram carregados na nuvem OneDrive através do mesmo GoodSync. A maior parte dos arquivos não é pessoal, então eu os enviava como estavam, sem criptografia. O que era pessoal, era enviado como uma tarefa separada, com criptografia.

OneDrive foi escolhido porque a assinatura do Office 365 Home Premium por 2000 por ano oferecia cinco (agora já são seis) terabytes na nuvem. Mesmo que em pedaços de um terabyte. Agora, a gratuidade ficou um pouco mais cara, mas algumas semanas atrás ainda havia a opção por 2600-2700 por ano (é preciso procurar entre os revendedores). Eu já previa isso, quando no ano passado a MS aumentou os preços e ainda parou de vender assinaturas no site, então ativei a assinatura por cinco anos à frente enquanto ainda estavam à venda por 1800-2000 as caixas (claro que poderia ter comprado algumas caixas de reserva, mas não me arrisquei a fazer planos tão longos).

Armazenamento, backup e catalogação de fotografias

A velocidade de upload é a máxima para o meu plano, 4-5 megabytes/segundo, à noite chega a 10. Na época, olhei para o crashplan — lá, o máximo que conseguia era um megabyte por segundo.

Terabytes vitalícios por 2-3$ no ebay é uma questão muito aleatória. Pois a vida útil pode ser muito curta; até agora, três meses é o recorde. Não é adequado fazer backup em um lugar que pode acabar a qualquer momento, mesmo que por pennies.

Armazenamento, backup e catalogação de fotografias

Mas agora, devido ao fato de que decidi transferir parte das tarefas do desktop para o servidor, a cópia para o OneDrive foi transferida para o Duplicati. Mesmo sendo uma versão beta, estou utilizando há alguns meses e até agora tem funcionado de forma bastante estável. Como o Duplicati, de qualquer forma, mantém seus backups em arquivos, e não espalhados, decidi que tudo o que for carregado será criptografado com os recursos embutidos. Afinal, a restauração, se necessário, terá que ser feita pelo Duplicati também. Então que tudo seja criptografado.

Considerando que os terabytes estão fragmentados, o backup na nuvem consiste em várias tarefas. Aqui está ocorrendo a reenvio do backup para a nuvem. O de 2019 subiu rapidamente — levei alguns dias para enviar uma meia centena de fotos, pois não viajei muito ainda, e o de 2018 está sendo transferido aos poucos. A velocidade de upload atual não é a máxima — é dia, as conexões estão ocupadas e tudo mais.

Armazenamento, backup e catalogação de fotografias

Na nuvem, a pasta com o backup aparece assim — muitos arquivos zip, o tamanho do arquivo é configurável na criação da tarefa:

Armazenamento, backup e catalogação de fotografias

Faço uma cópia no disco rígido externo, que fica guardado no armário, cerca de uma vez por mês. Conecto e inicio manualmente a tarefa com o GoodSync. Embora, claro, eu possa configurar para iniciar a cópia automaticamente ao conectar o disco — mas nem sempre preciso fazer uma cópia quando conecto o disco.

Seria bom ter mais um local de armazenamento remoto — um que fosse meu e não muito em nuvem. No meu servidor, que está na plataforma do provedor, já preparei um disco para isso faz tempo, mas nunca encontrei tempo. Mas como já comecei a mover tudo para o duplicati, acho que também farei isso agora, depois de transferir tudo para o onedrive.

Armazenamento, backup e catalogação de fotografias

Como ele é catalogado?

Aqui a questão se divide em duas — o nível do sistema de arquivos, onde a catalogação ocorre em nível de pastas, e a catalogação lógica, com mais parâmetros, porque a árvore de pastas tem suas limitações.

Sim, eu fotografo em raw. Porque do raw eu posso criar um jpg a qualquer momento, mas não o contrário. Antigamente, fotografava em raw+jpg para poder transferir rapidamente as fotos para o telefone e enviá-las para a internet (o raw era difícil de transferir para o telefone). Eu deletava o jpg ao copiá-lo para o desktop. Mas agora, meu telefone tem um bom suficiente qualidade de foto (para postar na internet), então eu abandonei completamente o jpg nas câmeras. As imagens restantes são aquelas dos tempos em que não tinha uma mirrorless ou vêm do telefone.

Armazenamento, backup e catalogação de fotografias

No nível do sistema de arquivos, se parece assim: no nível superior das pastas — a origem. Nomes dos fotógrafos geralmente.

Armazenamento, backup e catalogação de fotografias

Um nível abaixo — temas. Todos têm temas mais ou menos iguais, podem haver temas pessoais (por exemplo, 'Cães', alguns temas podem não existir.

Armazenamento, backup e catalogação de fotografias

Depois — anos. Dentro do ano, pastas por dia. Em uma pasta pode haver sessões fotográficas separadas, se as fotos do dia se dividem em temas.

Assim, o caminho para o arquivo pode parecer mais ou menos assim: MinhasViagens20182018-04-11 BerlimEstação FrancesaP4110029.ORF

Eu fotografo com duas câmeras, geralmente uma de cada vez, mas às vezes levo ambas — quando isso acontece, eu coloco as fotos delas em uma única pasta. O principal é que o horário esteja sincronizado, caso contrário, depois tenho que calcular a diferença e corrigir a data de captura de todos os arquivos (no lightroom é fácil, mas é chato calcular a diferença de tempo).

Para fotos do telefone, há uma pasta separada no segundo nível, mas se necessário, a fotografia pode ser enviada para uma pasta temática.

Catalogação lógica acima das pastas — Adobe Lightroom. Claro, há muitos programas para catalogação e edição, mas o Lightroom atende minhas necessidades, o preço é razoável (e até o Photoshop vem incluído), e nos últimos anos ele ficou menos lento. Embora, claro, a migração total para SSD também ajudou.

Todas as fotos estão em um único diretório. A estrutura básica de pastas é da seção anterior, sobre isso — informações EXIF, geotags, tags e marcações de cor. Também é possível ativar o reconhecimento facial, mas eu não uso.

Com base em tudo isso, é possível criar ‘coleções inteligentes’ — seleções dinâmicas com base em propriedades específicas do arquivo — desde parâmetros de captura até comentários de texto.

Armazenamento, backup e catalogação de fotografias

Todas as tags são armazenadas em arquivos, o histórico de edição está em arquivos XMP ao lado dos RAWs. O catálogo do Lightroom é feito backup pelos próprios recursos do Lightroom uma vez por semana em uma pasta específica, de onde depois é enviado para o OneDrive. Além disso, com o Veeam Agent, o disco do sistema do desktop é backup todos os dias no servidor — e o catálogo é armazenado exatamente no disco do sistema.

E tudo isso é sobre fotos? Não há outros tipos de arquivos?

Existem, por que não. Os métodos de backup não mudam (se é que é preciso fazer backup), mas os métodos de catalogação dependem do tipo de conteúdo.

Na maioria das vezes, basta a organização no nível das pastas, tags não são necessárias. Apenas para filmes e séries, é utilizado um catalogador separado — Plex Media Server. Também é um servidor de mídia, como o nome sugere. Mas por lá não está organizado, apenas um quarto da videoteca está bem classificado, e o restante está na pasta '!to sort'.

Fonte: habr.com

Compre hospedagem confiável para sites com proteção contra DDoS, servidores VPS VDS 🔥 Compre hospedagem confiável para sites com proteção contra DDoS, servidores VPS VDS | ProHoster