Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Дуго сам желео да пишем о томе како чувам своје датотеке и како правим резервне копије, али никада нисам стигао до тога. Недавно се овде појавио чланак, донекле сличан мом, али са другачијим приступом.
Сам чланак.

Већ дуги низ година покушавам да пронађем савршену методу за чување датотека. Мислим да сам пронашао, али увек постоји нешто за побољшање, ако имате било какву идеју како да то учините боље, радо ћу прочитати.

Почећу тако што ћу вам рећи неколико речи о себи, бавим се веб развојем и фотографисањем у слободно време. Отуда закључак да треба да чувам радне и личне пројекте, фотографије, видео записе и друге датотеке.

Имам око 680 ГБ датотека, од којих су 90 посто фотографије и видео записи.

Циркулација датотека у мојим складиштима:

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Ево приближног дијаграма како и где се чувају све моје датотеке.

Сада више.

Као што видите, срце свега је мој НАС, односно Синологи ДС214, један од најједноставнијих НАС-ова компаније Синологи, међутим, он се носи са свиме што ми треба.

Дропбок

Моја радна машина је мацбоок про 13, 2015. Тамо имам 512ГБ, али наравно не одговарају сви фајлови, чувам само оно што је тренутно потребно. Синхронизујем све своје личне датотеке и фасцикле са Дропбок-ом, знам да није баш поуздан, али обавља само функцију синхронизације. И он то ради најбоље, барем из онога што сам ја покушао. И пробао сам све познате и не тако познате облаке.

Синологи такође има свој облак, можете га поставити на свој НАС, неколико пута сам покушавао да пређем са Дропбок-а на Синологи Цлоуд Статион, али је увек било проблема са синхронизацијом, увек је било неких грешака или нисам све синхронизовао.

Све важне датотеке се чувају у Дропбок фолдеру, понекад нешто сачувам на радној површини, да нешто не изгубим, направио сам симболичку везу ка Дропбок фолдеру помоћу програма МацДропАни.
Мој фолдер за преузимање није синхронизован ни на који начин, али ту нема ничег важног, само привремене датотеке. Ако преузмем нешто важно, копирам га у одговарајућу фасциклу у Дропбок-у.

Моје авантуре са Дропбок-омЈедном давно, негде 2013-2014, све своје фајлове сам похранио у Дропбок и само тамо није било резервних копија. Тада нисам имао 1Тб, односно нисам га платио, имао сам око 25Гб, што сам зарадио позивањем пријатеља или другим задацима.

Једног лепог јутра сам укључио компјутер и сви моји фајлови су нестали, добио сам и писмо од Дропбок-а где се извињавају и да су моји фајлови нестали њиховом кривицом. Дали су ми линк где могу да вратим своје датотеке, али наравно ништа није враћено. За ово су ми дали 1Тб на годину дана, након чега сам постао њихов клијент, ма колико то чудно звучало, али им никада нисам веровао.

Као што сам горе написао, нисам могао да пронађем облак који би ми више одговарао, прво, још није било проблема са синхронизацијом, а друго, многе различите услуге раде само са Дропбок-ом.

гит

Радни фајлови се чувају на радном серверу, лични пројекти се чувају на ГитЛабу, овде је све једноставно.

Времеплов

Такође правим резервну копију целог система, изузимајући наравно фасциклу Дропбок и Довнлоадс, како не бих узалуд заузимао простор. Правим резервну копију система користећи Тиме Мацхине, одличан алат који ми је више пута помогао. Ја то радим на истом НАС-у, на срећу има такву функцију. Наравно, то можете учинити на екстерном ХДД-у, али није тако згодно. Сваки пут када треба да повежете екстерни диск и сами покренете Тиме Мацхине. Због лењости сам често правио такве резервне копије једном у неколико недеља. Он аутоматски прави резервне копије на серверу, ја чак и не примећујем када то ради. Радим од куће, тако да увек имам нову резервну копију целог система. Копија се прави неколико пута дневно, нисам рачунао колико пута и колико често.

НАС

Овде се дешава сва магија.

Синологи има одличан алат, зове се Цлоуд Синц, мислим да је из имена јасно шта ради.

Може да синхронизује многе системе у облаку један са другим, или тачније, да синхронизује датотеке са НАС сервера са другим облацима. Мислим да постоји преглед овог програма на интернету. Нећу улазити у детаље. Боље да опишем како га користим.

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

На серверу имам фасциклу на диску која се зове Дропбок, то је копија мог Дропбок налога, Цлоуд Синц је одговоран за синхронизацију свега овога. Ако се нешто догодило са датотекама у Дропбок-у, то ће се догодити на серверу, није важно да ли је избрисано или креирано. Генерално, класична синхронизација.

Иандек диск

Затим бацам све ове датотеке на свој Иандек диск, користим га као домаћи резервни диск, односно бацам датотеке тамо, али не бришем ништа одатле, испоставило се да је то таква депонија датотека, али помогло је неколико пута.

Гоогле диска

Тамо шаљем само фасциклу „Фотографије“, такође у режиму синхронизације, то радим само за практично гледање фотографија у Гоогле фотографијама и са могућношћу брисања фотографија одатле и бришу се свуда (осим Иандек диска, наравно). Писаћу о фотографији испод; чак бисте могли да напишете и посебан чланак тамо.

ХиперБацкуп

Али све ово није баш поуздано; ако случајно избришете датотеку, она ће бити свуда избрисана и можете је сматрати изгубљеном. Можете, наравно, вратити са Иандек диска, али прво, резервна копија на једном месту није сама по себи поуздана, а сам Иандек диск није услуга у коју можете бити 100% сигурни, иако никада није било проблеми са тим.

Због тога сам увек покушавао да складиштим датотеке негде другде, са нормалним системом резервних копија.

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Синологи такође има алатку за ово, зове се ХиперБацкуп, која прави резервне копије датотека на другим Синологи серверима или на неким решењима у облаку независних произвођача.
Такође може да прави резервне копије на екстерним дисковима повезаним са НАС-ом, што сам донедавно радио. Али ово такође није поуздано, на пример, ако дође до пожара, онда је крај и сервера и ХДД-а.

Синологи Ц2

Овде се постепено приближавамо другој услузи, овог пута из саме Синологи. Има своје облаке за чување резервних копија. Дизајниран је специјално за ХиперБацкуп, он тамо прави резервне копије сваког дана, али ово је добро осмишљена резервна копија, постоје верзије датотека, временска линија, па чак и клијенти за Виндовс и Мац ОС.

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

То је све за складиштење датотека, надам се да су моје датотеке безбедне.

Сада пређимо на сортирање датотека.

Ручно сортирам обичне фајлове, књиге, скениране документе и друге небитне фајлове у фасцикле, као и све остало. Обично их нема много и ретко их отварам.

Најтеже је сортирати фотографије и видео записе, имам их много.

Снимим од неколико десетина до неколико стотина фотографија месечно. Снимам ДСЛР-ом, дроном и понекад телефоном. Фотографије могу бити личне или за залихе. Понекад снимам и кућне видео снимке (не оно што мислите, само породичне видео снимке, често са мојом ћерком). Такође га треба некако ускладиштити и сортирати како не би постао неред.

Имам фасциклу у истом Дропбоксу која се зове Сорт Имагес, постоје подфолдери у које иду све фотографије и видео снимци, одатле се узимају и сортирају где је потребно.

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Сортирање се одвија на НАС серверу, тамо раде басх скрипте које се аутоматски покрећу једном дневно и раде свој посао. НАС је такође одговоран за њихово покретање; постоји планер задатака који је одговоран за покретање свих скрипти и других задатака. Можете да конфигуришете колико често и када ће се задаци покретати, црон са интерфејсом ако је једноставнији.

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Свака фасцикла има своју скрипту. Сада више о фасциклама:

Дроне — ево фотографија са дрона које сам снимио у личне сврхе. Прво обрађујем све фотографије у лигхтроому, а затим извозим ЈПГ у овај фолдер. Одатле завршавају у другом Дропбок фолдеру, „Фотографија“.

Постоји фолдер „Дроне“ и тамо су већ сортирани по години и месецу. Саме скрипте креирају потребне фолдере и саме преименују фотографије према мом шаблону, обично је ово датум и време снимања фотографије, додајем и случајни број на крају како се фајлови са истим именом не би појављивали. Не сећам се зашто постављање секунди у називу датотеке није било погодно за ове сврхе.

Дрво изгледа овако: Пхото/Дроне/2019/05 — Маи/01 — Маи — 2019_19.25.53_37.јпг

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Дроне Видео — Још не снимам видео дроном, има много тога да научим, немам времена за то сада, али већ сам направио фолдер.

Операције слике — унутра се налазе две фасцикле, када се фајлови тамо нађу, они се једноставно или компримују на максималној страни на 2000пк за објављивање на Интернету, или се слике окрећу, ово ми више не треба, али још нисам обрисао фасциклу.

Панораме — ту долазе панораме, као што можете да претпоставите, ја их чувам одвојено пошто је реч о специфичној врсти фотографије, обично их снимам дроном. Радим и обичне панораме, али радим и панораме од 360 и понекад сфере, овакве панораме попут малих планета, радим и дроном. Из овог фолдера све фотографије такође иду у Пхото/Панорамас/2019/01 - Маи - 2019_19.25.53_37.јпг. Овде не сортирам по месецима јер нема толико панорама.

Персонал Пхото — Ево фотографија које снимам ДСЛР-ом, обично су то породичне фотографије или фотографије са путовања, уопште, фотографије које се снимају за успомену и за себе. Такође обрађујем необрађене фотографије у Лигхтроом-у, а затим их извозим овде.

Одавде долазе овде: Пхото/2019/05 — Маи/01 — Маи — 2019_19.25.53_37.јпг

Ако сам фотографисао неку прославу или нешто друго што би било боље чувати одвојено, онда у фасцикли 2019 направим фасциклу са називом прославе и ту ручно копирам фотографију.

РАВ — ево извора фотографија. Увек снимам у РАВ формату, све фотографије чувам у ЈПГ формату, али понекад желим да сачувам и РАВ фајлове, понекад желим да обрадим оквир другачије. Обично је ово природа и само најбољи снимци стижу до ње, а не сви редом.

Фотографија — овде постављам фотографије за сточне фотографије, које снимам или на ДСЛР или на дрон. Сортирање је исто као и на другим фотографијама, само у посебном фолдеру.

У основном директоријуму Дропбок-а налази се фасцикла Цамера Уплоадс, ово је подразумевана фасцикла у коју мобилна апликација Дропбок поставља све фотографије и видео записе. Све фотографије супруге са телефона су избачене на овај начин. Такође постављам све своје фотографије и видео записе са свог телефона овде и одатле их сортирам у посебан фолдер. Али ја то радим на другачији начин, мени згоднији. Постоји такав програм за Андроид, ФолдерСинц, који вам омогућава да снимите све фотографије са свог мобилног телефона, отпремите их на Дропбок и затим их избришете са телефона. Постоји много подешавања, препоручујем. Видео снимци са вашег телефона такође иду у ову фасциклу; они су такође сортирани као и све фотографије, по години и месецу.

Сам сам сакупио све скрипте из разних упутстава на интернету, нисам нашао готова решења. Не знам баш ништа о басх скриптама, можда има неких грешака или би неке ствари могле да се ураде боље, али мени је најважније да они раде свој посао и раде оно што мени треба.

Скрипте су отпремљене на ГитХуб: https://github.com/pelinoleg/bash-scripts

Раније сам за сортирање фотографија и видео записа користио Хазел под мац ос-ом, тамо је све лакше, сви задаци се креирају визуелно, нема потребе за писањем кода, али постоје два недостатка. Прво, треба да држите све фасцикле на рачунару како би све добро функционисало, а друго, ако изненада пређем на Виндовс или Линукс, тамо нема таквих програма. Покушао сам да потражим алтернативу, али све су биле безуспешне. Решење са скриптама на серверу је универзалније решење.

Све скрипте су конфигурисане да се извршавају једном дневно, обично ноћу. Али ако немате времена да чекате и морате некако сада да извршите потребну скрипту, постоје два решења: повежите се преко ССХ-а са сервером и извршите потребну скрипту или идите на админ панел и такође ручно покрените тражену скрипту. скрипта. Све ово ми делује незгодно, па сам нашао треће решење. Постоји програм за Андроид који може да шаље ссх команде. Направио сам неколико команди, свака има своје дугме, а сада ако треба да сортирам, на пример, фотографије које сам снимио са дрона, онда само притиснем једно дугме и скрипта се покреће. Програм се зове ССХинг, постоје и други слични, али за мене је ово најпогоднији.

Чување и аутоматско сортирање фотографија и других датотека. Рад са складиштем датотека заснованим на НАС Синологи

Имам и неколико својих сајтова, више су за приказ, скоро нико не иде тамо, али ипак не шкоди направити резервну копију. Покрећем своје сајтове на ДигиталОцеан-у, где сам инсталирао ааПанел панел. Тамо је могуће направити резервне копије свих датотека и свих база података, али на истом диску.

Чување резервне копије на истом диску није случај, тако да користим и басх скрипту да одем тамо и све копирам на свој сервер, архивирајући све у једну архиву са датумом у имену.

Надам се да ће бар некоме помоћи методе које користим и са којима сам поделио.

Као што се види из чланка, волим аутоматизацију и трудим се да аутоматизујем све што је могуће, нисам много тога описивао са становишта аутоматизације, пошто су то већ друге теме и други чланци.

Извор: ввв.хабр.цом

Додај коментар