Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Aghju longu vulutu scrive nantu à cumu almacenà i mo fugliali è cumu fà una copia di salvezza, ma ùn aghju mai avutu. Recentemente un articulu hè apparsu quì, un pocu simili à u mo, ma cù un approcciu sfarente.
L'articulu stessu.

Aghju pruvatu à truvà u metudu perfettu per almacenà i schedari dapoi parechji anni. Pensu chì l'aghju trovu, ma ci hè sempre qualcosa per migliurà, se avete idee nantu à cumu fà megliu, saraghju felice di leghje.

Cuminciaraghju per dì vi uni pochi di parolle nantu à mè stessu, facciu u sviluppu web è piglià ritratti in u mo tempu liberu. Da quì a cunclusione chì aghju bisognu di almacenà u travagliu è i prughjetti persunali, ritratti, video è altri schedari.

Aghju circa 680 GB di fugliali, u 90 per centu di quale sò ritratti è video.

Circulazione di i fugliali in i mo magazzini:

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Eccu un diagramma apprussimativu di cumu è induve tutti i mo fugliali sò almacenati.

Avà più.

Comu pudete vede, u core di tuttu hè u mo NAS, vale à dì u Synology DS214, unu di i NAS più simplici di Synology, in ogni modu, copre cù tuttu ciò chì aghju bisognu.

Dropbox

A mo macchina di travagliu hè un macbook pro 13, 2015. Aghju 512GB quì, ma di sicuru micca tutti i fugliali sò adattati, aghju guardatu solu ciò chì hè necessariu in u mumentu. Sincronizza tutti i mio fugliali persunali è cartulare cù Dropbox, sò chì ùn hè micca assai affidabile, ma eseguisce solu a funzione di sincronizazione. È u face megliu, almenu da ciò chì aghju pruvatu. E aghju pruvatu tutte e nuvole famose è micca cusì famose.

Synology hà ancu u so propiu nuvulu, pudete implementà in u vostru NAS, aghju pruvatu parechje volte per passà da Dropbox à Synology Cloud Station, ma ci sò sempre prublemi cù a sincronizazione, ci sò sempre qualchì errore, o ùn aghju micca sincronizà tuttu.

Tutti i schedarii impurtanti sò guardati in u cartulare Dropbox, qualchì volta salvu qualcosa nantu à u mo scrittore, per ùn perde micca qualcosa, aghju fattu un ligame simbolicu à u cartulare Dropbox cù u prugramma MacDropAny.
U mio cartulare Download ùn hè micca sincronizatu in ogni modu, ma ùn ci hè nunda di impurtante, solu i schedari tempuranee. Sè scaricate qualcosa impurtante, l'aghju copiatu in u cartulare adattatu in Dropbox.

E mo avventure cù DropboxUna volta, in un locu in 2013-2014, aghju guardatu tutti i mo schedari in Dropbox è solu quì, ùn ci era micca copia di salvezza. Allora ùn aghju micca 1Tb, vale à dì, ùn aghju micca pagatu per questu, aghju avutu circa 25Gb, chì aghju guadagnatu invitendu amici o altre attività.

Una bella matina aghju accesu l'urdinatore è tutti i mo schedari sò spariti, aghju ancu ricevutu una lettera da Dropbox induve si scusanu è chì i mo schedari sò spariti per a so culpa. M'hanu datu un ligame induve puderia restaurà i mo schedari, ma di sicuru nunda ùn hè statu restauratu. Per questu m'hà datu 1Tb per un annu, dopu chì sò diventatu u so cliente, ùn importa micca quantu stranu pò sonu, ma ùn aghju mai fiducia in elli.

Cumu l'aghju scrittu sopra, ùn aghju micca pussutu truvà un nuvulu chì era più adattatu per mè, prima, ùn ci era ancu micca prublemi di sincronizazione, è in segundu, parechji servizii diffirenti funzionanu solu cù Dropbox.

Git

I fugliali di travagliu sò guardati in u servitore di travagliu, i prughjetti persunali sò guardati in GitLab, tuttu hè simplice quì.

Chè U Sole

Aghju ancu fà una copia di salvezza di tuttu u sistema, escludendu u cartulare Dropbox è Downloads di sicuru, per ùn piglià spaziu in vain. Fau una copia di salvezza di u sistema cù Time Machine, un strumentu eccellente chì m'hà aiutatu più di una volta. Facciu nantu à u stessu NAS, per furtuna hà una tale funzione. Pudete fà nantu à un HDD esternu, sicuru, ma ùn hè micca cusì cunvene. Ogni volta chì avete bisognu di cunnette un discu esternu è lanciate Time Machine stessu. A causa di a pigrizia, aghju spessu fattu tali backups una volta ogni pochi settimane. Face automaticamente backups à u servitore, ùn aghju mancu nutatu quandu ellu faci. U travagliu da casa, cusì aghju sempre una copia di salvezza fresca di tuttu u mo sistema. Una copia hè fatta parechje volte à ghjornu, ùn aghju micca cuntatu quantu volte è quantu spessu.

NAS

Questu hè induve tutta a magia succede.

Synology hà un strumentu eccellente, hè chjamatu Cloud Sync, pensu chì da u nome hè chjaru ciò chì faci.

Pò sincronizà parechji sistemi di nuvola cù l'altri, o più precisamente, sincronizà i fugliali da un servitore NAS cù altri nuvuli. Pensu chì ci hè una rivista di stu prugramma in linea. Ùn entreraghju in dettagli. Megliu discrive cumu l'aghju utilizatu.

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

In u servitore aghju un cartulare di discu chjamatu Dropbox, hè una copia di u mo contu Dropbox, Cloud Sync hè rispunsevule per a sincronizazione di tuttu questu. Se qualcosa hè accadutu à i schedarii in Dropbox, succederà in u servitore, ùn importa micca s'ellu hè sguassatu o creatu. In generale, a sincronizazione classica.

U discu Yandex

In seguitu, aghju lanciatu tutti questi fugliali nantu à u mo discu Yandex, l'aghju utilizatu cum'è un discu di salvezza casalingo, vale à dì, aghju lanciatu i fugliali quì, ma ùn sguassate nunda da quì, risulta esse un tali dump di schedari, ma hà aiutatu un paru di volte.

Google Drive

Ci mandu solu u cartulare "Foto", ancu in u modu di sincronizazione, fate questu solu per una visualizazione conveniente di e foto in Google Photos è cù a capacità di sguassà e foto da quì è sò sguassate in ogni locu (eccettu u discu Yandex di sicuru). Scriveraghju nantu à a foto quì sottu; pudete ancu scrive un articulu separatu quì.

HyperBackup

Ma tuttu questu ùn hè micca assai affidabile; se sguassate accidentalmente un schedariu, serà sguassatu in ogni locu è pudete cunsiderà persu. Pudete, sicuru, restaurà da u discu Yandex, ma prima, una copia di salvezza in un locu ùn hè micca assai affidabile in sè stessu, è u discu Yandex stessu ùn hè micca un serviziu in quale pudete esse 100% cunfidendu, ancu s'ellu ùn ci hè mai statu. prublemi cun ella.

Dunque, aghju sempre pruvatu à almacenà i fugliali in un altru locu, cù un sistema di salvezza normale.

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Synology hà ancu un strumentu per questu, hè chjamatu HyperBackup, fa una copia di salvezza di i fugliali sia in altri servitori di Synology, sia in alcune soluzioni in nuvola di fabricatori di terzu.
Puderà ancu fà una copia di salvezza à i dischi esterni cunnessi à un NAS, chì hè ciò chì aghju fattu finu à pocu tempu. Ma questu hè ancu micca affidabile, per esempiu, se ci hè un focu, allora hè a fine di u servitore è di u HDD.

Sinologia C2

Quì ci avvicinamu gradualmente à un altru serviziu, sta volta da Synology stessu. Havi i so nuvuli per almacenà e backups. Hè cuncepitu specificamente per HyperBackup, face una copia di salvezza ogni ghjornu, ma questu hè una copia di salvezza ben pensata, ci sò versioni di schedari, una cronologia, è ancu i clienti per Windows è mac os.

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Hè tuttu per u almacenamentu di i fugliali, spergu chì i mo schedari sò sicuri.

Avà andemu à l'ordine di i schedari.

Sorteghju i schedarii ordinali, i libri, i scans di documenti è altri schedarii senza impurtanza in cartulare cù a manu, cum'è tuttu u restu. Di solitu ùn sò micca assai di elli è raramente li aperti.

A cosa più difficiuli hè di sorte e foto è i video, ne aghju assai.

Pigliu da parechje decine à parechji cintunari di ritratti à u mese. Tiro cù una DSLR, un drone è qualchì volta in u mo telefunu. I ritratti ponu esse persunali o per stock. A volte aghju ancu filmatu video in casa (micca ciò chì pudete pensà, solu video di famiglia, spessu cù a mo figliola). Hè ancu bisognu à esse in qualchì modu almacenatu è ordenatu in modu chì ùn divente micca un mess.

Aghju un cartulare in u stessu Dropbox chjamatu Sort Images, ci sò subfolders induve tutte e foto è i video vanu, da quì sò pigliati è ordenati induve necessariu.

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

A classificazione hè fatta nantu à u servitore NAS, ci sò scripts bash in esecuzione chì sò lanciati automaticamente una volta à ghjornu è facenu u so travagliu. U NAS hè ancu rispunsevuli di lancià; ci hè un pianificatore di attività chì hè rispunsevule per lancià tutti i scripts è altre attività. Pudete cunfigurà quantu spessu è quandu i travaglii seranu lanciati, cron cù una interfaccia s'ellu hè più simplice.

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Ogni cartulare hà u so propiu script. Avà più nantu à i cartulare:

Drone - quì sò ritratti da un drone chì aghju pigliatu per scopi persunali. Prima prucessa tutte e foto in lightroom, poi esporte JPG in stu cartulare. Da quì si finiscinu in un altru cartulare Dropbox, "Photo".

Ci hè un cartulare "Drone" è quì sò digià ordinati per annu è mese. I scripts stessi creanu i cartulare necessarii è rinominà i ritratti stessi secondu u mo mudellu, di solitu questu hè a data è l'ora chì a foto hè stata presa, aghju ancu aghjunghje un numeru aleatoriu à a fine per chì i schedari cù u listessu nome ùn appariscenu micca. Ùn mi ricordu micca perchè l'inseme di seconde in u nome di u schedariu ùn era micca adattatu per questi scopi.

L'arburu s'assumiglia cusì: Photo/Drone/2019/05 — May/01 — May — 2019_19.25.53_37.jpg

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Video drone - Ùn aghju micca ancu filmatu video cù un drone, ci hè assai per amparà, ùn aghju micca tempu per questu avà, ma aghju digià creatu un cartulare.

Operazioni di l'Image - Ci sò dui cartulare dentru, quandu i schedari sò truvati quì, sò simpliciamente o cumpressi nantu à u latu massimu à 2000px per a publicazione in Internet, o l'imaghjini sò sbulicati, ùn aghju più bisognu di questu, ma ùn aghju micca sguassatu u cartulare.

Panorami - questu hè quì chì i panorami entranu, cum'è pudete guessà, li guarderaghju separatamente postu chì questu hè un tipu specificu di foto, di solitu li pigliu cù un drone. Aghju ancu fà panorami regularmente, ma ancu fà panorami 360 è qualchì volta sfere, stu tipu di panorami cum'è pianeti chjuchi, aghju ancu fà cù un drone. Da questu cartulare, tutte e ritratti vanu ancu à Photo/Panoramas/2019/01 - May - 2019_19.25.53_37.jpg. Quì ùn aghju micca sorte per mese perchè ùn ci sò micca tanti panorami.

Foto persunale — Eccu i ritratti chì aghju pigliatu cù una DSLR, di solitu questi sò ritratti di famiglia o di viaghju, in generale, ritratti chì sò fatti per a memoria è per mè stessu. Prucessu ancu e foto crude in Lightroom è poi l'esporta quì.

Da quì venenu quì: Photo/2019/05 — May/01 — May — 2019_19.25.53_37.jpg

Se aghju fotografatu un tipu di celebrazione o qualcosa d'altru chì saria megliu guardatu separatamente, allora in u cartulare 2019 crea un cartulare cù u nome di a celebrazione è copià a foto manualmente.

PRIMA - quì sò e fonti di foto. Sempre scatto in RAW, aghju guardatu tutte e foto in JPG, ma qualchì volta vogliu almacenà i fugliali RAW ancu, qualchì volta vogliu processà un quadru in modu diversu. Di solitu, questu hè a natura è solu i migliori scatti ghjunghjenu, micca tutti in una fila.

Foto Stock - quì aghju caricatu e foto per e foto di stock, chì pigliu sia nantu à una DSLR o in un drone. A classificazione hè uguale à l'altri ritratti, solu in u so propiu cartulare separatu.

In u cartulare radicali di Dropbox, ci hè un cartulare Caricamenti Camera, questu hè u cartulare predeterminatu in quale l'applicazione mobile Dropbox carica tutte e foto è i video. Tutte e foto di a moglia da u telefunu sò abbandunate in questu modu. Aghju ancu caricate tutte e mo foto è video da u mo telefunu quì è da quì l'aghju sorte in un cartulare separatu. Ma l'aghju fattu in una manera diversa, più cunvene per mè. Ci hè un tali prugramma per Android, FolderSync, permette di piglià tutte e foto da u vostru telefuninu, caricate in Dropbox è dopu sguassate da u telefunu. Ci sò assai paràmetri, u cunsigliu. I video da u vostru telefunu entranu ancu in stu cartulare; sò ancu ordinati cum'è tutte e foto, per annu è mese.

Aghju cullucatu tutti i script da mè da diverse struzzioni nantu à Internet; ùn aghju micca truvatu solu suluzione pronta. Ùn sò micca sapè nunda di bash scripts, forsi ci sò qualchì errore o certe cose puderanu esse fattu megliu, ma u più impurtante per mè hè chì facenu u so travagliu è facenu ciò chì aghju bisognu.

I scripts sò stati caricati in GitHub: https://github.com/pelinoleg/bash-scripts

Nanzu, per sorte e foto è video, aghju utilizatu Hazel sottu mac os, tuttu hè più faciule quì, tutti i travaglii sò creati visualmente, ùn ci hè bisognu di scrive codice, ma ci sò dui disadvantages. Prima, avete bisognu di mantene tutte e cartulari nantu à l'urdinatore in modu chì tuttu funziona bè, è in segundu, s'ellu cambiassi subitu à Windows o Linux, ùn ci sò micca tali prugrammi. Aghju pruvatu à circà una alternativa, ma tutti ùn anu micca successu. Una suluzione cù scripts nantu à u servitore hè una suluzione più universale.

Tutti i scripts sò cunfigurati per esse eseguiti una volta à ghjornu, di solitu di notte. Ma s'ellu ùn avete micca u tempu d'aspittà è avete bisognu di eseguisce in qualchì modu u script necessariu avà, ci sò duie suluzioni: cunnette via SSH à u servitore è eseguisce u script necessariu, o andate à u pannellu di amministrazione è ancu eseguite manualmente u necessariu. script. Tuttu chistu mi pari inconveniente, cusì aghju trovu una terza suluzione. Ci hè un prugramma per Android chì pò mandà cumandamenti ssh. Aghju creatu parechji cumandamenti, ognunu hà u so propiu buttone, è avà s'ellu ci vole à sorte, per esempiu, e foto chì aghju pigliatu da un drone, dopu appughjà un buttone è u script corre. U prugramma hè chjamatu SSHing, ci sò altri simili, ma per mè questu hè u più còmuda.

Almacenamiento è classificazione automatica di e foto è altri schedari. U travagliu cù l'almacenamiento di schedari basatu annantu à Synology NAS

Aghju ancu parechji di i mo propri siti, sò più per spettaculu, quasi nimu và quì, ma ancu ùn hè micca male per fà una copia di salvezza. Eseguite i mo siti in DigitalOcean, induve aghju installatu u pannellu aaPanel. Ci hè pussibule di fà copie di salvezza di tutti i schedari è di tutte e basa di dati, ma in u stessu discu.

L'almacenamiento di una copia di salvezza in u stessu discu ùn hè micca u casu, cusì aghju utilizatu ancu un script bash per andà quì è copià tuttu à u mo servitore, archiviendu tuttu in un archiviu cù a data in u nome.

Spergu chì almenu qualcunu serà aiutatu da i metudi chì aghju utilizatu è cù quale aghju spartutu.

Comu pò esse vistu da l'articulu, mi piace l'automatizazione è pruvate d'automatizà tuttu ciò chì hè pussibule, ùn aghju micca scrittu assai cose da u puntu di vista di l'automatizazione, postu chì sò digià altri temi è altri articuli.

Source: www.habr.com

Add a comment