Hier schrijven mensen af en toe berichten over hoe ze hun foto's bewaren en back-uppen — en gewoon bestanden. In de laatste post hierover schreef ik een vrij lange reactie, dacht er even over na en besloot het toch om te zetten in een bericht. Zeker omdat ik mijn back-upmethode in de cloud een beetje heb veranderd, misschien is het nuttig voor iemand.
Thuis server, waar veel van het onderstaande gebeurt:

Wat moet je bewaren?
Het belangrijkste en meest omvangrijke voor mij zijn de foto's. Af en toe video, maar heel af en toe — dat neemt te veel ruimte in en kost te veel tijd, daarom hou ik er niet zo van, ik film alleen korte video's die liggen bij de andere foto's. Momenteel beslaat mijn fotoarchief ongeveer 1,6 terabyte en groeit met zo'n 200 gigabyte per jaar. Andere belangrijke zaken zijn veel minder omvangrijk en daarmee heb ik minder vragen over opslag en back-up, een tiental gigabytes kan ik verspreiden over een aantal gratis of zeer goedkope plekken, van DVD's tot USB-sticks en cloudoplossingen.
Hoe wordt het opgeslagen en geback-upt?
Mijn gehele fotoarchief beslaat momenteel ongeveer 1,6 terabyte. De masterkopie wordt opgeslagen op een twee terabyte SSD in mijn thuiscomputer. Ik probeer foto's niet langer dan noodzakelijk op geheugenkaarten te houden, zodra ik kan, dump ik ze op de desktop of laptop (wanneer ik onderweg ben). Hoewel ik ze niet van de USB-stick verwijder als er nog ruimte is. Een extra kopie is nooit ongewenst. Zodra ik thuiskom, worden ook alle bestanden van de laptop op de desktop gezet.

Dagelijks maak ik een kopie van de map met foto's op de thuisserver (met een soort spiegel op basis van Drivepool, waar belangrijke mappen zijn ingesteld voor duplicatie). Trouwens, ik blijf Drivepool aanraden — in al die jaren dat ik het gebruik, geen enkele glitch. Het werkt gewoon. Je moet alleen niet op de Russische interface letten; ik heb de ontwikkelaars een betere vertaling gestuurd, maar weet niet wanneer ze die implementeren. Voor nu is het in het Russisch een programma om een zwembad te beheren (manage pool).

Je kunt natuurlijk ook vaker kopieën maken; als ik veel werk heb gedaan op een dag, kan ik handmatig de taak starten. Hoewel ik er nu wel over denk om de kopie te starten bij bestandwijzigingen, ik wil niet dat de desktop de hele tijd aan staat, laat de server maar meer werken. Het programma is — GoodSync.

Tot voor kort werden bestanden vanaf dezelfde desktop met GoodSync naar de cloud Onedrive geüpload. De meeste bestanden zijn niet persoonlijk, dus ik uploadde ze zoals ze zijn, zonder encryptie. Wat wel persoonlijk was, werd als aparte taak geüpload, met encryptie.
Onedrive werd gekozen omdat het Office 365 Home Premium-abonnement voor 2000 per jaar vijf (en nu al zes) terabyte in de cloud bood. Ook al in stukjes van een terabyte. Tegenwoordig is de gratis optie iets duurder geworden, maar een paar weken geleden was er nog een optie voor 2600-2700 per jaar (moet nog zoeken bij detailhandelaren). Ik had dit al voorzien toen MS vorig jaar de prijzen verhoogde en bovendien het abonnement op de website stopte, dus activeerde ik een abonnement voor vijf jaar vooruit terwijl het nog beschikbaar was voor 1800-2000 per doos (ik had natuurlijk ook nog een paar dozen als reserve kunnen kopen, maar zo ver durfde ik niet te gaan).

De uploadsnelheid is maximaal voor mijn tarief, 4-5 megabyte/sek., 's nachts tot 10. Vroeger keek ik naar crashplan – daar uploadde je goed als je een megabyte per seconde had.
Levenslange 5TB voor 2-3$ van eBay is een zeer willekeurig iets. Want de levensduur kan erg kort zijn, tot nu toe is drie maanden het record. Het is geen goede zaak om te back-uppen naar een plek die elk moment kan verdwijnen. Ook al is het voor een prikkie.

Maar nu, omdat ik besloot om een deel van de taken van de desktop naar de server te verplaatsen, heb ik het kopiëren naar Onedrive overgezet naar Duplicati. Het is misschien een bètaversie, maar ik gebruik het al enkele maanden en tot nu toe werkt het behoorlijk stabiel. Aangezien Duplicati zijn back-ups toch in archieven opslaat en niet in losse bestanden, besloot ik alles wat geüpload wordt te versleutelen met ingebouwde middelen. Het moet toch via Duplicati worden hersteld als er iets misgaat. Dus laat het alles versleutelen.
Gezien het feit dat ik terabytes in stukjes heb, bestaat mijn back-up in de cloud uit verschillende taken. Hier is precies het opnieuw uploaden van de back-up naar de cloud aan de gang. 2019 is snel geüpload – daar zijn in een paar dagen een paar tientallen foto's, ik ben nog niet vaak op reis geweest, en 2018 stroomt langzaam binnen. De huidige uploadsnelheid is niet maximaal – het is dag, de kanalen zijn belast en zo verder.

In de cloud ziet de map met de back-up er zo uit – veel zip-archieven, de grootte van het archief kan worden ingesteld bij het aanmaken van de taak:

Ongeveer één keer per maand maak ik een kopie op een externe schijf die in de kast ligt. Ik sluit hem aan en start handmatig de taak met hetzelfde GoodSync. Natuurlijk kan ik ook de taak instellen zodat deze automatisch start zodra ik de schijf aansluit — maar het is niet altijd nodig om een kopie te maken als ik de schijf aansluit.
Idealiter zou je ook nog een extra opbergplaats op afstand moeten hebben — een persoonlijke en niet te cloud-achtige. Op mijn de server, die op de server van de provider staat, heb ik al heel lang een schijf voorbereid voor dit doel, maar ik heb er nooit de tijd voor genomen. Maar nu ik bezig ben met het synchroniseren van alles onder duplicati, denk ik dat ik dit ook nu zal doen, nadat ik alles naar onedrive heb geüpload.

Hoe wordt het gecatalogiseerd?
Hier wordt de kwestie in tweeën verdeeld — het niveau van het bestandssysteem, waar de catalogisering op het niveau van mappen plaatsvindt, en de logische catalogisering op basis van meer parameters, omdat de mapstructuur toch beperkt is in mogelijkheden.
Ja, ik fotografeer in RAW. Want van RAW kan je op elk moment JPG maken, maar niet omgekeerd. Ooit fotografeerde ik in RAW+JPG, zodat ik foto’s snel naar mijn telefoon kon overzetten en op internet kon zetten (RAW naar de telefoon overbrengen was lastig). JPG verwijderde ik later bij het kopiëren naar de desktop. Maar nu ben ik tevreden met de kwaliteit van de foto's op mijn telefoon (voor online plaatsing), dus heb ik compleet afgezien van JPG op camera’s. De rest komt of van die dagen toen ik nog geen spiegelloze camera had, of komt van mijn telefoon.

Op het niveau van het bestandssysteem ziet het er ongeveer zo uit: op het hoogste niveau van de mappen — de bron. Gewoonlijk de namen van de fotografen.

Een niveau lager — thema’s. Iedereen heeft min of meer dezelfde, er kunnen persoonlijke thema’s zijn (bijvoorbeeld ‘Honden’, sommige thema’s kunnen ontbreken.

Daarna — jaren. Binnen een jaar zijn er mappen per dag. In de map kunnen aparte fotosessies zitten, als de foto’s van de dag onder verschillende thema’s vallen.
Uiteindelijk kan het pad naar het bestand er ongeveer zo uitzien: MijnReizen20182018-04-11 BerlijnFranse stationP4110029.ORF
Ik fotografeer met twee camera's, meestal om de beurt, maar soms neem ik beide mee — dan gooi ik de foto's van beide in één map. Het belangrijkste is dat de tijd gesynchroniseerd is, anders moet ik later het verschil uitrekenen en de datum van opname voor alle bestanden corrigeren (in Lightroom is dit eenvoudig, maar het is irritant om het tijdsverschil te berekenen).
Voor foto's vanaf een telefoon is er een aparte map op het tweede niveau, maar indien nodig kan de foto ook naar een thematische map worden verzonden.
Logische catalogisering bovenop mappen — Adobe Lightroom. Natuurlijk zijn er genoeg programma's voor catalogisering en verwerking, maar Lightroom bevalt me, het is ook redelijk betaalbaar (en zelfs Photoshop wordt er bij geleverd), en het is de laatste paar jaar minder traag geworden. Hoewel, de volledige overgang naar SSD heeft daar ook bij geholpen.
Alle foto's zijn opgeslagen in één catalogus. Basisstructuur van mappen wordt uit het vorige punt gebruikt, erbovenop komt de EXIF-informatie, geotags, tags en kleurmarkeringen. Gezichtsherkenning kan ook worden ingeschakeld, maar daar maak ik geen gebruik van.
Op basis van al het bovenstaande kunnen 'slimme collecties' worden aangemaakt — dynamische selecties op basis van bepaalde bestandskenmerken — van opnamespecificaties tot tekst in commentaren.

Alle tags worden opgeslagen in bestanden, het bewerkingsverleden bevindt zich in XMP-bestanden naast de RAW's. De Lightroom-catalogus wordt eenmaal per week geback-upt via de middelen van Lightroom zelf naar een bepaalde map, van waaruit het vervolgens naar OneDrive wordt overgezet. En bovendien wordt elke dag met de Veeam-agent de systeemschijf van de desktop naar de server gekopieerd — en de catalogus wordt precies op de systeemschijf bewaard.
En wat met foto’s? Zijn er geen andere bestandssoorten?
Jawel, waarom niet. De back-upmethoden verschillen niet (als het al nodig is om te back-uppen), en de catalogiseringsmethoden zijn afhankelijk van het type inhoud.
Over het algemeen is het voldoende om op het niveau van mappen te sorteren, tags zijn niet nodig. Alleen voor films en series wordt er een aparte catalogiseerder gebruikt. — Plex Media Server. Het is ook een mediaserver, zoals de naam al doet vermoeden. Maar dat is niet goed geregeld, slechts een kwart van de filmcollectie is goed gesorteerd, de rest ligt in de map ‘!to sort’.
Bron: habr.com
