Съхраняване, архивиране и каталогизиране на снимки

Тук те периодично пишат публикации за това как съхраняват и архивират своите снимки - и само файлове. В последния такъв пост написах доста дълъг коментар, помислих малко и реших да го разширя в публикация. Освен това промених донякъде метода за архивиране в облака, може да е полезно за някого.

Домашният сървър е мястото, където се случва голяма част от следното:

Какво трябва да спестите?

Най-важното и обемно за мен са снимките. От време на време видео, но много от време на време - заема твърде много място и отнема твърде много време, така че не го харесвам много, снимам само кратки видеоклипове, които лежат в същата купчина като снимките. В момента фотоархивът ми заема около 1,6 терабайта и нараства с около 200 гигабайта на година. Други важни неща са много по-малко обемисти и има по-малко проблеми с тях по отношение на съхранение и архивиране; дузина или два гигабайта могат да бъдат натъпкани в куп безплатни или много евтини места, от DVD до флаш устройства и облаци.

Как се съхранява и архивира?

Целият ми фотоархив в момента заема около 1,6 терабайта. Главното копие се съхранява на двутерабайтов SSD на вашия домашен компютър. Опитвам се да не съхранявам снимки на карти с памет по-дълго от необходимото; изтривам своя настолен компютър или лаптоп възможно най-скоро (когато съм на път). Въпреки че не го изтривам от флаш устройството, ако все още има място. Допълнително копие никога не пречи. От лаптопа, при пристигането си у дома, всичко се прехвърля и на работния плот.

Всеки ден се прави копие на папка със снимки на домашен сървър (с огледален тип, базиран на Drivepool, където е конфигурирано дублиране на важни папки). Между другото, все още препоръчвам Drivepool - през всичките години на използване, нито един бъг. Просто работи. Просто не гледайте руския му интерфейс, изпратих на разработчиците по-приличен превод, но не знам кога ще бъде внедрен. Междувременно на руски това е програма за управление на басейн.

Можете, разбира се, да правите копия по-често; ако през деня е свършена много работа, тогава мога да принудя задачата да се изпълни. Въпреки че сега все още мисля да започна да копирам при смяна на файлове, искам да спра да държа десктопа включен денонощно, да оставя сървъра да работи повече. Програмата е GoodSync.

Доскоро файловете се качваха от същия работен плот с помощта на същия GoodSync в облака Onedrive. Повечето от моите файлове не са лични, така че ги качих такива, каквито са, без криптиране. Това, което беше лично, беше качено като отделна задача, с криптиране.

Onedrive беше избран, защото абонаментът за Office 365 Home Premium за 2000 годишно предлагаше пет (и сега шест) терабайта облачно съхранение. Дори ако е на парчета с размер на терабайт. Сега обаче безплатният стана малко по-скъп, но преди няколко седмици имаше друга опция за 2600-2700 на година (трябва да погледнете търговците на дребно). Предвидих това, когато миналата година MS вдигна цените и дори спря да продава абонаменти в сайта, така че активирах абонамент за пет години напред, докато 1800-2000 кутии все още бяха в продажба (разбира се, имаше и няколко кутии в резерв вземете го, но не посмях да направя такова предположение).

Скоростта на изтегляне е максималната за моята тарифа, 4-5 мегабайта / сек, през нощта до 10. По едно време погледнах crashplan - там е добре, ако се изтеглят мегабайти в секунда.

Доживотни 5TB за $2-3 от ebay е много случайно нещо. Тъй като продължителността на живота може да се окаже много кратка, засега рекордът е три месеца. Не е добра идея да правите резервно копие на място, което може да се срути всеки момент. Дори за стотинки.

Но сега, поради факта, че реших да преместя част от задачите от работния плот на сървъра, прехвърлих копирането в Onedrive към Duplicati. Въпреки че е бета, използвам го от няколко месеца и досега работи доста надеждно. Тъй като Duplicati все още съхранява резервните си копия в архиви, а не групово, реши да шифрова всичко, което се изтегля, с помощта на вградени инструменти. Така или иначе, ако нещо се случи, ще трябва да го възстановите чрез Duplicati. Така че нека шифрова всичко.

Като се има предвид, че имам терабайти на части, архивирането в облака се състои от няколко задачи. Това е мястото, където резервното копие се качва отново в облака. 2019 г. се изсипа бързо - имаше петдесет снимки там за няколко дни, все още не съм карал много, а 2018 г. бавно се изсипва. Текущата скорост на изтегляне не е максималната - това е ден, каналите са заети и всичко това.

В облака папката за архивиране изглежда така - има много zip архиви, размерът на архива се конфигурира при създаване на задача:

Около веднъж месечно правя копие на външен диск, който стои в шкаф. Свързвам и ръчно стартирам задачата със същия GoodSync. Въпреки че, разбира се, можете да го настроите да стартира, когато дискът е свързан - но не винаги е необходимо да правя копие, когато свързвам диска.

Би било добре, ако имате нужда от още едно отдалечено място за съхранение - ваше собствено и не много облачно. На моя сървър, който се намира на сайта на доставчика, отдавна подготвих диск за този въпрос, но все още не мога да стигна до него. Но тъй като вече започнах да влача всичко под duplicati, мисля да го направя сега, след като кача отново всичко в Onedrive.

Как се каталогизира?

Тук въпросът е разделен на две - ниво файлова система, където каталогизирането се извършва на ниво папка и логическо каталогизиране според по-голям брой параметри, тъй като дървото на папките все още е ограничено във възможностите си.

Да, снимам на открито. Тъй като raw може да се конвертира в jpg по всяко време, но не и обратното. Преди снимах в raw+jpg, за да мога бързо да прехвърля снимката на телефона си и да я изпратя в интернет (беше трудно да прехвърля raw на телефона си). jpg след това се изтрива при копиране на работния плот. Но сега телефонът започна да ме устройва по отношение на качеството на снимките (за публикуване в интернет), така че напълно изоставих jpg на камерите. Или са останали от времето, когато нямах безогледален фотоапарат, или са от телефона ми.

На ниво файлова система изглежда така: на ниво горна папка - източникът. Имената на фотографите са общи.

Едно ниво надолу са темите. Всеки има повече или по-малко едни и същи теми, може да има лични теми (например „Кучета“, някои теми може да не съществуват.

Следваща - година. Вътре в годината има папки по дни. В папката може да има отделни фотосесии, ако снимките за деня са разделени по теми.

В резултат на това пътят до файла може да изглежда така: MyTrips20182018-04-11 BerlinFrench StationP4110029.ORF

Правя снимки с два фотоапарата, обикновено редуващи се, но от време на време вземам и двата с мен - тогава изхвърлям снимките от тях в една папка. Основното е, че времето е синхронизирано, в противен случай трябва да изчислите разликата и да коригирате датата на заснемане на всички файлове (в Lightroom това е лесно, но е малко досадно да се изчисли разликата във времето).

Има отделна папка на второ ниво за снимки от вашия телефон, но при необходимост снимката може да бъде изпратена в тематична папка.

Логическо каталогизиране върху папки - Adobe Lightroom. Разбира се, има доста програми за каталогизиране и обработка, но Lightroom ми подхожда, той е доста достъпен (и дори предоставят Photoshop в комплекта), а през последните няколко години също стана по-малко бавен. Въпреки че, разбира се, пълният преход към SSD също помогна.

Всички снимки живеят в една директория. Използва се основната структура на папките от предишния параграф, върху която е EXIF ​​​​информация, географски тагове, тагове и цветни маркировки. Можете също така да включите лицевото разпознаване, но аз не го използвам.

Въз основа на всичко по-горе можете да създавате „интелигентни колекции“ - динамични селекции въз основа на определени свойства на файла - от параметри на снимане до текст в коментари.

Всички тагове се съхраняват във файлове, хронологията на редактирането се съхранява в XMP файлове до ravs. Каталогът на Lightroom се архивира с помощта на самия Lightroom веднъж седмично в определена папка, откъдето след това се качва в OneDrive. Е, положителната страна е, че чрез агента на veeam системният диск на работния плот се качва на сървъра всеки ден - и директорията се съхранява на системния диск.

Какво е всичко за снимката? Какво, няма други типове файлове?

Да защо не? Методите за архивиране не се различават (ако изобщо е необходимо архивиране), но методите за каталогизиране зависят от вида на съдържанието.

По принцип сортирането на ниво папка е достатъчно; етикети не са необходими. Само за филми и сериали се използва отделен каталогизатор. - Plex Media Server. Това също е медиен сървър, както подсказва името. Но конят не лежеше там, обикновено е сортиран добре, ако една четвърт от филмовата библиотека е, а останалата част лежи в папката „!to sort“.

Източник: www.habr.com