Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Aspaldi nahi nuen nire fitxategiak nola gordetzen ditudan eta segurtasun-kopiak nola egiten ditudan idatzi nahi nuen, baina ez nintzen inoiz lortu. Duela gutxi artikulu bat agertu da hemen, nirearen antzeko samarra baina beste ikuspegi batekin.
Artikulua bera.

Urte asko daramatzat fitxategiak gordetzeko metodo ezin hobea bilatzen saiatzen. Aurkitu dudala uste dut, baina beti dago hobetzeko zerbait, hobeto egiteko ideiarik baduzu, pozik irakurriko dut.

Niri buruz hitz batzuk esaten hasiko naiz, web garapena egiten dut eta nire denbora librean argazkiak ateratzen ditut. Hortik ondorioztatzen da lan eta proiektu pertsonalak, argazkiak, bideoak eta bestelako fitxategiak gorde behar ditudala.

680 GB inguru dauzkat fitxategiak, eta horien ehuneko 90 argazkiak eta bideoak dira.

Nire biltegietan fitxategien zirkulazioa:

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Hona hemen nire fitxategi guztiak nola eta non gordetzen diren azaltzen duen gutxi gorabeherako diagrama bat.

Orain gehiago.

Ikus dezakezun bezala, guztiaren bihotza nire NAS da, hots, Synology DS214, Synology-ren NAS sinpleenetako bat, hala ere, behar dudan guztiari aurre egiten dio.

Dropbox

Nire lan-makina macbook pro 13, 2015 bat da. 512 GB ditut hor, baina, noski, fitxategi guztiak ez dira kabitzen, momentuan behar dena baino ez dut gordetzen. Nire fitxategi eta karpeta pertsonal guztiak Dropbox-ekin sinkronizatzen ditut, badakit ez dela oso fidagarria, baina sinkronizazio funtzioa bakarrik egiten du. Eta berak egiten du ondoen, nik probatu dudanetik behintzat. Eta hodei famatu eta ez hain ospetsu guztiak probatu nituen.

Synology-k ere bere hodeia dauka, zure NASean zabaldu dezakezu, hainbat aldiz saiatu nintzen Dropboxetik Synology Cloud Station-era aldatzen, baina beti zeuden arazoak sinkronizazioarekin, beti zeuden akats batzuk edo ez nuen dena sinkronizatu.

Artxibo garrantzitsu guztiak Dropbox karpetan gordetzen dira, batzuetan nire mahaigainean zerbait gordetzen dut, zerbait ez galtzeko, Dropbox karpetarako esteka sinbolikoa egin nuen MacDropAny programa erabiliz.
Nire Deskarga karpeta ez dago inola ere sinkronizatuta, baina ez dago ezer garrantzitsurik, aldi baterako fitxategiak soilik. Zerbait garrantzitsua deskargatzen badut, Dropbox-eko dagokion karpetan kopiatzen dut.

Nire abenturak Dropbox-ekinBazen behin, 2013-2014 urteetan, nire fitxategi guztiak Dropbox-en gordetzen nituen eta han bakarrik ez zegoen babeskopiarik. Orduan ez nuen 1Tb, hau da, ez nuen ordaintzen, 25Gb inguru nituen, lagunak gonbidatuz edo beste zeregin batzuetatik irabazten nituenak.

Goiz eder batean ordenagailua piztu nuen eta nire fitxategi guztiak desagertu ziren, Dropbox-en gutun bat ere jaso nuen non barkamena eskatzen zuten eta nire fitxategiak euren erruz desagertu zirela. Esteka bat eman zidaten, non nire fitxategiak leheneratu nituen, baina noski ez zen ezer berreskuratu. Honetarako 1Tb eman zidaten urtebetez, eta gero haien bezero bihurtu nintzen, arraroa izan arren, baina inoiz ez nintzen haiekin fidatu.

Goian idatzi dudan bezala, ezin izan dut aurkitu niretzat egokiago zen hodeirik, lehenik eta behin, oraindik ez zegoen sinkronizazio arazorik, eta, bigarrenik, zerbitzu ezberdin askok Dropbox-ekin soilik funtzionatzen dute.

Git

Laneko fitxategiak laneko zerbitzarian gordetzen dira, proiektu pertsonalak GitLab-en gordetzen dira, dena erraza da hemen.

Time Machine

Sistema osoaren babeskopia bat ere egiten dut, Dropbox eta Deskargak karpeta alde batera utzita noski, alferrik lekua ez hartzeko. Time Machine erabiliz sistemaren babeskopia egiten dut, behin baino gehiagotan lagundu didan tresna bikaina. NAS berean egiten dut, zorionez funtzio hori du. Kanpoko HDD batean egin dezakezu, noski, baina ez da hain erosoa. Kanpoko disko bat konektatu eta Time Machine zuk zeuk abiarazi behar duzun bakoitzean. Alferkeria dela eta, sarritan egiten nituen halako babeskopiak aste batzuetan behin. Automatikoki egiten ditu segurtasun kopiak zerbitzarian, ez naiz ohartzen noiz egiten duen ere. Etxetik lan egiten dut, beraz, beti daukat nire sistema osoaren babeskopia berri bat. Kopia bat egunean hainbat aldiz egiten da, ez nuen zenbat aldiz eta zenbat aldiz zenbat aldiz.

NAS

Hemen gertatzen da magia guztia.

Synology-k tresna bikaina du, Cloud Sync deitzen da, nik uste dut izenetik argi dagoela zer egiten duen.

Hodei sistema asko elkarren artean sinkroniza ditzake, edo zehatzago esanda, NAS zerbitzari bateko fitxategiak beste hodei batzuekin sinkroniza ditzake. Uste dut sarean programa honen berrikuspena dagoela. Ez naiz xehetasunetan sartuko. Hobe dut deskribatu nola erabiltzen dudan.

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Zerbitzarian Dropbox izeneko disko karpeta bat daukat, nire Dropbox kontuaren kopia bat da, Cloud Sync arduratzen da hau guztia sinkronizatzeaz. Dropbox-eko fitxategiekin zerbait gertatuko balitz, zerbitzarian gertatuko da, ez du axola ezabatu edo sortu den. Oro har, sinkronizazio klasikoa.

Yandex disko

Ondoren, fitxategi horiek guztiak nire Yandex diskora botatzen ditut, etxeko babeskopia-disko gisa erabiltzen dut, hau da, fitxategiak bertan botatzen ditut baina ez dut ezer ezabatzen hortik, halako fitxategiak iraultzen dira, baina pare bat aldiz lagundu zuen.

Google Drive

Bertan "Argazkiak" karpeta bakarrik bidaltzen dut, sinkronizazio moduan ere, hau Google Photos-en argazkiak eroso ikusteko eta hortik argazkiak ezabatzeko aukerarekin bakarrik egiten dut eta nonahi ezabatzen dira (Yanddex diskoa izan ezik, noski). Beheko argazkiari buruz idatziko dut; aparteko artikulu bat ere idatzi dezakezu bertan.

HyperBackup

Baina hori guztia ez da oso fidagarria; nahi gabe fitxategi bat ezabatzen baduzu, edonon ezabatuko da eta galdutzat jo dezakezu. Yandex diskotik leheneratu dezakezu, noski, baina lehenik eta behin, leku bakarreko babeskopia ez da berez oso fidagarria, eta Yandex diskoa bera ez da % 100ean ziur egon zaitezkeen zerbitzu bat, inoiz egon ez den arren. harekin arazoak.

Hori dela eta, beti saiatu naiz fitxategiak beste nonbait gordetzen, babeskopia sistema normal batekin.

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Synology-k ere badu horretarako tresna bat, HyperBackup deitzen da, fitxategien babeskopiak egiten ditu beste Synology zerbitzarietan edo hirugarren fabrikatzaileen hodeiko soluzio batzuetan.
NAS batera konektatutako kanpoko diskoetan babeskopiak ere egin ditzake, duela gutxi arte egin nuena. Baina hau ere ez da fidagarria, adibidez, sute bat badago, zerbitzariaren eta HDDaren amaiera.

Sinologia C2

Hemen pixkanaka beste zerbitzu batera hurbilduko gara, oraingoan Synology bertatik. Bere hodeiak ditu babeskopiak gordetzeko. HyperBackup-erako bereziki diseinatuta dago, egunero egiten ditu babeskopiak bertan, baina hau ondo pentsatutako babeskopia da, fitxategien bertsioak daude, denbora-lerroa eta baita Windows eta mac osentzako bezeroak ere.

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Hori guztia fitxategiak gordetzeko, espero dut nire fitxategiak seguru egotea.

Orain joan gaitezen fitxategiak ordenatzera.

Fitxategi arruntak, liburuak, dokumentuen eskaneatzea eta garrantzirik gabeko beste fitxategi batzuk karpetetan eskuz ordenatzen ditut, beste guztia bezala. Normalean ez dira asko eta gutxitan irekitzen ditut.

Zailena argazkiak eta bideoak ordenatzea da, asko ditut.

Hilean dozenatik ehunka argazki ateratzen ditut. DSLR batekin, drone batekin eta batzuetan telefonoarekin filmatzen dut. Argazkiak pertsonalak edo stocketarako izan daitezke. Batzuetan etxeko bideoak ere grabatzen ditut (ez duzu uste duzuna, familiako bideoak soilik, askotan nire alabarekin). Era berean, nolabait gorde eta ordenatu behar da, nahaspilatu ez dadin.

Dropbox berean daukat Sort Images izeneko karpeta bat, argazki eta bideo guztiak doazen azpikarpetak daude, hortik atera eta behar den lekuan ordenatzen dira.

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Sailkatzea NAS zerbitzarian egiten da, bertan exekutatzen diren bash script-ak daude, egunean behin automatikoki abiarazten direnak eta beren lana egiten dutenak. NAS abiarazteaz ere arduratzen da; script guztiak eta beste zeregin batzuk abiarazteko ardura duen zereginen programatzaile bat dago. Zereginak zenbat eta noiz abiaraziko diren konfigura dezakezu, errazagoa bada interfaze batekin cron.

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Karpeta bakoitzak bere gidoia du. Orain gehiago karpetei buruz:

Drone β€” hona hemen helburu pertsonaletarako atera ditudan drone baten argazkiak. Lehenengo argazki guztiak lightroom-en prozesatzen ditut, gero JPG karpeta honetara esportatzen dut. Handik beste Dropbox karpeta batean amaitzen dute, "Argazkia".

"Drone" karpeta bat dago eta hor jada urte eta hilabeteka sailkatuta daude. Scriptek eurek beharrezko karpetak sortzen dituzte eta argazkiei beraiek izena aldatu egiten diete nire txantiloiaren arabera, normalean hau da argazkia atera zen data eta ordua, amaieran ausazko zenbaki bat ere gehitzen dut izen bereko fitxategiak ager ez daitezen. Ez dut gogoratzen zergatik ez zen egokia fitxategiaren izenan segundoak jartzea helburu horietarako.

Honela dauka zuhaitzak: Argazkia/Drone/2019/05 β€” Maiatza/01 β€” Maiatza β€” 2019_19.25.53_37.jpg

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Drone Bideoa β€” Oraindik ez dut bideorik grabatzen dronearekin, asko dago ikasteko, ez daukat denborarik horretarako, baina dagoeneko karpeta bat sortu dut.

Irudi Eragiketak β€” Bi karpeta daude barruan, fitxategiak bertan aurkitzen direnean, besterik gabe, 2000 px-ko gehienezko aldean konprimitzen dira Interneten argitaratzeko, edo irudiak iraultzen dira, jada ez dut hau behar, baina oraindik ez dut karpeta ezabatu.

Panoramak β€” hemen agertzen dira panoramak, asma dezakezun bezala, bereizita gordetzen ditut argazki mota zehatz bat denez, normalean drone batekin ateratzen ditut. Panorama arruntak ere egiten ditut, baina 360ko panoramak eta batzuetan esferak ere egiten ditut, planeta txikiak bezalako panorama motak, drone batekin ere egiten ditut. Karpeta honetatik, argazki guztiak Argazkia/Panoramas/2019/01 - Maiatza - 2019_19.25.53_37.jpg atalera ere doaz. Hemen ez dut hilabeteka ordenatzen, ez baitago horrenbeste panorama.

Argazki pertsonala β€” Hona hemen DSLR batekin ateratzen ditudan argazkiak, normalean familiako argazkiak edo bidaietakoak dira, oro har, oroimenerako eta niretzat egiten diren argazkiak. Argazki gordinak ere prozesatzen ditut Lightroom-en eta gero hemen esportatzen ditut.

Hemendik hona iristen dira: Argazkia/2019/05 β€” Maiatza/01 β€” Maiatza β€” 2019_19.25.53_37.jpg

Ospakizunen bat edo hobeto gordeko litzatekeen beste zerbait atera badut, 2019 karpetan ospakizunaren izena duen karpeta bat sortzen dut eta argazkia eskuz kopiatzen dut bertan.

RAW - Hona hemen argazki iturriak. Beti RAW-n filmatzen dut, argazki guztiak JPG-n gordetzen ditut, baina batzuetan RAW fitxategiak ere gorde nahi ditut, beste batzuetan fotograma bat beste era batera prozesatu nahi dut. Normalean hori natura izaten da eta plano onenak bakarrik iristen dira, ez denak jarraian.

Stock argazkia β€” hemen stock-argazkietarako argazkiak igotzen ditut, DSLR edo drone batean ateratzen ditudanak. Sailkatzea beste argazkietako berdina da, bere karpetan.

Dropbox-en erro-direktorioan, Kamera Kargatzen karpeta bat dago, hau da Dropbox mugikorreko aplikazioak argazki eta bideo guztiak kargatzen dituen karpeta lehenetsia. Telefonotik emaztearen argazki guztiak modu honetan botatzen dira. Gainera, nire telefonotik nire argazki eta bideo guztiak igotzen ditut hemen eta hortik aparte karpeta batean ordenatzen ditut. Baina beste era batera egiten dut, niretzat erosoagoa. Badago Androiderako FolderSync programa bat, argazki guztiak telefono mugikorretik ateratzeko, Dropboxera igo eta telefonotik ezabatzeko aukera ematen du. Ezarpen asko daude, gomendatzen dut. Zure telefonoko bideoak ere karpeta honetan sartzen dira; argazki guztiak bezala ordenatzen dira, urte eta hilabeteka.

Nik neuk bildu nituen script guztiak Interneteko hainbat argibideetatik; ez nuen prest egindako irtenbiderik aurkitu. Ez dakit ezer bash scriptei buruz, agian akats batzuk egon daitezke edo gauza batzuk hobeto egin daitezke, baina niretzat garrantzitsuena da euren lana egiten dutela eta behar dudana egiten dutela.

Scriptak GitHub-era kargatu ziren: https://github.com/pelinoleg/bash-scripts

Aurretik, argazkiak eta bideoak ordenatzeko, Hazel mac os-en erabiltzen nuen, han dena errazagoa da, zeregin guztiak bisualki sortzen dira, ez dago kodea idatzi beharrik, baina bi desabantaila daude. Lehenik eta behin, ordenagailuko karpeta guztiak gorde behar dituzu dena ondo funtziona dezan, eta bigarrenik, bat-batean Windows edo Linuxera aldatzen banaiz, ez dago horrelako programarik. Saiatu nintzen alternatiba bilatzen baina denak alferrik izan ziren. Zerbitzarian scriptak dituen irtenbidea irtenbide unibertsalagoa da.

Script guztiak egunean behin exekutatzeko konfiguratuta daude, normalean gauez. Baina itxaroteko astirik ez baduzu eta orain beharrezkoa den scripta nolabait exekutatu behar baduzu, bi irtenbide daude: SSH bidez konektatu zerbitzarira eta exekutatu behar den scripta, edo joan administrazio-panelera eta eskuz exekutatu behar dena. gidoia. Hori guztia deserosoa iruditzen zait, beraz, hirugarren irtenbide bat aurkitu dut. Badago Androiderako ssh komandoak bidal ditzakeen programa bat. Hainbat komando sortu nituen, bakoitzak bere botoia du, eta orain ordenatu behar baditut, adibidez, drone batetik ateratako argazkiak, orduan botoi bat sakatu eta gidoia abiarazten da. Programak SSHing du izena, badira antzeko beste batzuk, baina niretzat hau da erosoena.

Argazkiak eta bestelako fitxategiak biltegiratzea eta automatikoki ordenatzea. Synology NAS-en oinarritutako fitxategien biltegiarekin lan egitea

Nire webgune batzuk ere baditut, erakusteko gehiago dira, ia inor ez da bertara joaten, baina hala ere ez du minik egiten babeskopia egiteak. Nire guneak exekutatzen ditut DigitalOcean-en, non aaPanel panela instalatu nuen. Bertan fitxategi guztien eta datu-base guztien babeskopiak egin daitezke, baina disko berean.

Babeskopia bat disko berean gordetzea ez da kasua, beraz, bash script bat ere erabiltzen dut hara joateko eta dena nire zerbitzarian kopiatzeko, dena artxibo batean artxibatuz data izenean.

Espero dut gutxienez norbaiti lagunduko diola erabiltzen ditudan eta partekatu ditudan metodoekin.

Artikuluan ikusten denez, automatizazioa maite dut eta posible den guztia automatizatzen saiatzen naiz, ez dut gauza asko deskribatu automatizazioaren ikuspuntutik, hauek jada beste gai eta bestelako artikuluak baitira.

Iturria: www.habr.com

Gehitu iruzkin berria