Ukladanie, zálohovanie a katalogizácia fotografií

Tu pravidelne píšu príspevky o tom, ako ukladajú a zálohujú svoje fotografie — a jednoducho súbory. V poslednom takom príspevku som napísal dosť dlhý komentár, trochu som popremýšľal a rozhodol sa ho rozvinúť do príspevku. Tým skôr, že som trochu zmenil metódu zálohovania do cloudu, môže to byť užitočné pre niekoho.

Domáci server, kde sa odohráva veľa z nižšie opísaného:

Ukladanie, zálohovanie a katalogizácia fotografií

Čo treba uchovávať?

Najdôležitejšie a najobjemnejšie u mňa — fotografie. Zriedkavo videá, ale veľmi zriedkavo — zaberajú príliš veľa miesta a odčerpávajú priveľa času, preto ich veľmi nemám rád, natáčam iba krátke videá, ktoré sa povaľujú v tej istej hromade, kde sú aj fotografie. V súčasnosti môj fotoarchív zaberá približne 1,6 terabajtu a rastie zhruba o 200 gigabajtov ročne. Ostatné dôležité veci sú oveľa menej objemné a s nimi je menej otázok ohľadom ukladania a zálohovania, desať-dvanásť gigabajtov môžem rozdeliť na hromadu bezplatných alebo veľmi lacných miest, od DVD po flash disky a cloude.

Ako sa to uchováva a zálohuje?

Celý môj fotoarchív momentálne zaberá zhruba 1,6 terabajtu. Hlavná kópia je uložená na dvojterabajtovom SSD v domácom počítači. Na pamäťových kartách sa snažím neudržovať fotografie dlhšie, než je potrebné, pri prvej príležitosti prenášam na desktop alebo notebook (keď som na cestách). Aj keď z flash disku ich neodstraňujem, ak je ešte miesto. Navyše kópia nikdy neublíži. Po príchode domov sa všetko z notebooku tiež prenáša na desktop.

Ukladanie, zálohovanie a katalogizácia fotografií

Každodenne sa robí kópia zložky s fotografiami na domáci server (s typom zrkadla na báze Drivepool, kde je nastavené zdvojenie dôležitých zložiek). Mimochodom, Drivepool naďalej odporúčam — za všetky roky používania žiadny problém. Jednoducho funguje. Len sa netreba pozerať na jeho ruské rozhranie, poslal som vývojárom slušnejší preklad, ale neviem, kedy ho implementujú. A zatiaľ je to v ruštine program na správu bazéna (manage pool).

Ukladanie, zálohovanie a katalogizácia fotografií

Samozrejme, kópie môžem robiť aj častejšie, ak za deň urobím veľa práce, môžem nútene spustiť úlohu. Aj keď teraz uvažujem o tom, aby som spustil kopírovanie podľa zmien súborov, chcem prestať mať desktop zapnutý nepretržite, nech viac pracuje server. Program — GoodSync.

Ukladanie, zálohovanie a katalogizácia fotografií

Až donedávna sa súbory s rovnakým GoodSync nahrávali na OneDrive z tej istej desktopovej aplikácie. Väčšina súborov nie je osobných, preto som ich nahrával tak, ako sú, bez šifrovania. Čo bolo osobné, nahrávalo sa samostatnou úlohou so šifrovaním.

OneDrive bol vybraný, pretože prihlásenie na Office 365 Home Premium za 2000 ročne ponúkalo päť (a teraz už šesť) terabajtov v cloude. Hoci sú to len kúsky po terabajte. Teraz, pravda, je to trochu drahšie, ale niekoľko týždňov dozadu bola dokonca aj možnosť za 2600-2700 ročne (musím hľadať u maloobchodníkov). To som predpokladal, keď minulý rok Microsoft zvýšil ceny a navyše prestal predávať predplatné na webe, preto som aktivoval predplatné na päť rokov dopredu, kým to bolo ešte v predaji po 1800-2000 za balík (samozrejme, mohol som si zobrať aj niekoľko balíkov na zásobu, ale do takej miery som sa neodvážil plánovať).

Ukladanie, zálohovanie a katalogizácia fotografií

Rýchlosť nahrávania je maximálna pre môj tarif, 4-5 megabajtov/s, v noci až 10. Kedysi som sa pozeral na CrashPlan — tam sa nahrávalo dobre ak megabajt za sekundu.

Večné 5TB za 2-3$ z eBay je veľmi náhodná záležitosť. Pretože životnosť môže byť veľmi krátka, zatiaľ je rekord tri mesiace. Nie je rozumné zálohovať na miesto, ktoré môže kedykoľvek zaniknúť. Hoci aj za babku.

Ukladanie, zálohovanie a katalogizácia fotografií

Ale teraz, kvôli tomu, že som sa rozhodol presunúť časť úloh zo desktopu na server, som nahrávanie do OneDrive premiestnil na Duplicati. Hoci je to stále beta verzia, už niekoľko mesiacov ju používam a zatiaľ funguje celkom stabilne. Keďže Duplicati aj tak uchováva svoje zálohy v archívoch, a nie na kusy, rozhodol som sa všetko nahrávané šifrovať zabudovanými prostriedkami. Tak či onak, ak by bolo treba obnoviť, aj tak to bude musieť prebiehať cez Duplicati. Takže nech to všetko šifruje.

Vzhľadom na to, že terabajty mám na kusy, záloha v cloude pozostáva z niekoľkých úloh. Teraz sa práve prebieha nahrávanie zálohy do cloudu. Záloha za 2019 sa nahrala rýchlo — za pár dní päťdesiat fotiek, zatiaľ som málo cestoval, a 2018 sa pomaly nahráva. Aktuálna rýchlosť nahrávania nie je maximálna — počas dňa sú kanály zaťažené a všetko také.

Ukladanie, zálohovanie a katalogizácia fotografií

V cloude vyzerá priečinok so zálohou takto — veľa zip archívov, veľkosť archívu sa nastavuje pri vytváraní úlohy:

Ukladanie, zálohovanie a katalogizácia fotografií

Približne raz za mesiac robím zálohu na externý disk, ktorý je uložený v skrini. Pripojím ho a manuálne spustím úlohu pomocou GoodSync. Hoci, samozrejme, je možné nastaviť spustenie úlohy automaticky po pripojení disku — ale nie vždy potrebujem urobiť zálohu, keď pripojím disk.

V skutočnosti by som potreboval ešte jedno vzdialené miesto na úložisko — svoje a nie príliš cloudové. Na mojom serveri, ktorý je umiestnený na ploche poskytovateľa, mám už dávno pripravený disk na tento účel, ale stále sa k tomu nedostanem. Ale keďže som sa už pustil do presúvania všetkého pod duplicati, myslím, že to tiež spravím teraz, keď všetko pre-uploadujem do onedrive.

Ukladanie, zálohovanie a katalogizácia fotografií

Ako sa to katalogizuje?

Tu sa otázka delí na dve — úroveň súborového systému, kde sa katalogizácia koná na úrovni priečinkov, a logická katalogizácia podľa väčšieho počtu parametrov, pretože štruktúra priečinkov má predsa len obmedzené možnosti.

Áno, fotím vo formáte RAW. Pretože z RAW môžem kedykoľvek urobiť JPG, ale naopak to už nejde. Kedysi som fotil vo formáte RAW+JPG, aby som mohol rýchlo preniesť fotografie do mobilu a poslať ich na internet (RAW bolo ťažké preniesť do mobilu). JPG som potom mazal pri kopírovaní na desktop. Ale teraz som so kvalitou fotografií z mobilu spokojný (na zverejnenie na internete), preto som sa úplne vzdal JPG na fotoaparátoch. Zostali mi buď z tých čias, keď som nemal bezzrkadlovku, alebo prichádzajú z mobilu.

Ukladanie, zálohovanie a katalogizácia fotografií

Na úrovni súborového systému to vyzerá nejako takto: na najvyššej úrovni priečinkov — zdroj. Obvykle mená fotografov.

Ukladanie, zálohovanie a katalogizácia fotografií

O úroveň nižšie — témy. U všetkých sú viac-menej rovnaké, môžu byť aj osobné témy (napríklad 'Psy', niektoré témy nemusia existovať).

Ukladanie, zálohovanie a katalogizácia fotografií

Ďalej — roky. Vo vnútri roku priečinky podľa dní. V priečinku môžu byť samostatné fotosessions, ak fotografie za deň zapadajú do rôznych tém.

Nakoniec môže cesta k súboru vyzerať približne takto: MojeCesty20182018-04-11 BerlínFrancúzska stanicaP4110029.ORF

Fotím na dva fotoaparáty, zvyčajne po jednom, ale občas zoberiem aj oba — potom fotografie z nich zlučujem do jedného priečinka. Hlavné je, aby bola synchronizovaná čas, inak potom musím vypočítavať rozdiel a upravovať dátum snímania všetkých súborov (v lightroom je to jednoduché, ale zdĺhavé počítať časový rozdiel).

Pre fotky z telefónu je na druhom úrovni samostatná zložka, ale ak je to potrebné, fotografia môže byť odoslaná do tematickej zložky.

Logická katalogizácia nad zložkami — Adobe Lightroom. Samozrejme, programov na katalogizáciu a spracovanie je dosť veľa, ale Lightroom mi vyhovuje, cena je prijateľná (a dokonca sa dodáva aj Photoshop) a za posledné dva roky sa aj menej oneskoruje. Hoci, samozrejme, úplný prechod na SSD tiež pomohol.

Všetky fotografie sa nachádzajú v jednej zložke. Základne sa používa štruktúra zložiek z predchádzajúceho bodu, nad ňou — EXIF informácie, geotagy, značky a farebné označenia. Môžete zapnúť aj rozpoznávanie tváre, ale ja ho nepoužívam.

Na základe všetkého vyššie uvedeného môžete vytvárať „inteligentné kolekcie“ — dynamické výbery na základe určitých vlastností súboru — od parametrov snímania po text v komentároch.

Ukladanie, zálohovanie a katalogizácia fotografií

Všetky značky sa ukladajú do súborov, história úprav — v XMP súboroch vedľa RAW súborov. Katalog Lightroomu sa zálohuje prostriedkami samotného Lightroomu raz za týždeň do určitej zložky, odkiaľ sa následne nahráva na OneDrive. A navyše, prostredníctvom Veeam agenta sa každý deň systémový disk desktopu nahráva na server — a katalog sa nachádza práve na systémovom disku.

A čo všetko je o fotkách? Čo, iné typy súborov nie sú?

Sú, prečo by neboli. Metódy zálohovania sa nelíšia (ak je vôbec potrebné zálohovať), a metódy katalogizácie závisia od typu obsahu.

Väčšinou stačí triedenie na úrovni zložiek, značky nie sú potrebné. Len pre filmy a seriály sa používa samostatný katalogizátor. — Plex Media Server. Takisto je aj mediálny server, ako vyplýva z názvu. Ale tam sa toho veľa nenachádza, normálne je dobre usporiadaná možno štvrtina filmotéky, a zvyšok sa považuje za zložku „!to sort“.

Zdroj: habr.com

Kúpte si spoľahlivý hosting pre webové stránky s ochranou proti DDoS, VPS VDS servery 🔥 Kúpte si spoľahlivý hosting pre webové stránky s ochranou proti DDoS, VPS VDS servery | ProHoster