Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Rydw i wedi bod eisiau ysgrifennu ers amser maith am sut rydw i'n storio fy ffeiliau a sut rydw i'n gwneud copïau wrth gefn, ond wnes i erioed gyrraedd hynny. Yn ddiweddar ymddangosodd erthygl yma, braidd yn debyg i fy un i ond gyda dull gwahanol.
Yr erthygl ei hun.

Rwyf wedi bod yn ceisio dod o hyd i'r dull perffaith ar gyfer storio ffeiliau ers blynyddoedd lawer bellach. Rwy'n meddwl fy mod wedi dod o hyd iddo, ond mae bob amser rhywbeth i'w wella, os oes gennych unrhyw syniadau ar sut i'w wneud yn well, byddaf yn hapus i'w ddarllen.

Gadewch i mi ddechrau trwy ddweud ychydig eiriau wrthych amdanaf fy hun Rwy'n datblygu'r we ac yn tynnu lluniau yn fy amser rhydd. Dyna pam y casgliad bod angen i mi storio gwaith a phrosiectau personol, lluniau, fideos a ffeiliau eraill.

Mae gen i tua 680 GB o ffeiliau, ac mae 90 y cant ohonynt yn ffotograffau a fideos.

Cylchrediad ffeiliau yn fy storfeydd:

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Dyma ddiagram bras o sut a ble mae fy holl ffeiliau yn cael eu storio.

Nawr mwy.

Fel y gwelwch, calon popeth yw fy NAS, sef y Synology DS214, un o'r NAS symlaf o Synology, fodd bynnag, mae'n ymdopi â phopeth sydd ei angen arnaf.

Dropbox

Mae fy mheiriant gwaith yn macbook pro 13, 2015. Mae gen i 512GB yno, ond wrth gwrs nid yw'r holl ffeiliau'n ffitio, dwi ond yn storio'r hyn sydd ei angen ar hyn o bryd. Rwy'n cydamseru fy holl ffeiliau personol a ffolderi â Dropbox, gwn nad yw'n ddibynadwy iawn, ond dim ond y swyddogaeth cydamseru y mae'n ei chyflawni. Ac mae'n ei wneud orau, o leiaf o'r hyn yr wyf wedi ceisio. Ac fe wnes i drio'r holl gymylau enwog ac nid mor enwog.

Mae gan Synology ei gwmwl ei hun hefyd, gallwch ei ddefnyddio ar eich NAS, ceisiais sawl gwaith newid o Dropbox i Synology Cloud Station, ond roedd problemau cysoni bob amser, roedd rhai gwallau bob amser, neu wnes i ddim cydamseru popeth.

Mae'r holl ffeiliau pwysig yn cael eu storio yn y ffolder Dropbox, weithiau rwy'n arbed rhywbeth ar fy n ben-desg, er mwyn peidio â cholli rhywbeth, fe wnes i ddolen syml i'r ffolder Dropbox gan ddefnyddio rhaglen MacDropAny.
Nid yw'r ffolder Lawrlwytho yn cydamseru i mi o gwbl, ond does dim byd pwysig yno, dim ond ffeiliau dros dro. Os byddaf yn lawrlwytho rhywbeth pwysig, rwy'n ei gopïo i'r ffolder priodol yn Dropbox.

Fy anturiaethau gyda DropboxUn tro, rhywle yn 2013-2014, fe wnes i storio fy holl ffeiliau yn Dropbox a dim ond yno, nid oedd unrhyw gopïau wrth gefn. Yna doedd gen i ddim 1Tb, hynny yw, wnes i ddim talu amdano, roedd gen i tua 25Gb, a enillais trwy wahodd ffrindiau neu dasgau eraill.

Un bore braf troais y cyfrifiadur ymlaen a diflannodd fy holl ffeiliau, derbyniais hefyd lythyr gan Dropbox lle maent yn ymddiheuro a bod fy ffeiliau wedi diflannu trwy eu bai. Fe wnaethon nhw roi dolen i mi lle gallwn i adfer fy ffeiliau, ond wrth gwrs ni chafodd unrhyw beth ei adfer. Am hyn rhoddasant 1Tb i mi am flwyddyn, ac ar ôl hynny deuthum yn gleient iddynt, ni waeth pa mor rhyfedd y gallai swnio, ond nid oeddwn byth yn ymddiried ynddynt.

Fel y ysgrifennais uchod, ni allwn ddod o hyd i gwmwl a oedd yn fwy addas i mi, yn gyntaf, nid oedd unrhyw broblemau cydamseru eto, ac yn ail, mae llawer o wahanol wasanaethau'n gweithio gyda Dropbox yn unig.

mynd

Mae ffeiliau gwaith yn cael eu storio ar y gweinydd gwaith, mae prosiectau personol yn cael eu storio ar GitLab, mae popeth yn syml yma.

Peiriant amser

Rwyf hefyd yn gwneud copi wrth gefn o'r system gyfan, heb gynnwys y ffolder Dropbox a Downloads wrth gwrs, er mwyn peidio â chymryd lle yn ofer. Rwy'n gwneud copi wrth gefn o'r system gan ddefnyddio Time Machine, offeryn rhagorol sydd wedi fy helpu fwy nag unwaith. Rwy'n ei wneud ar yr un NAS, yn ffodus mae ganddo swyddogaeth o'r fath. Gallwch chi ei wneud ar HDD allanol, wrth gwrs, ond nid yw mor gyfleus. Bob tro mae angen i chi gysylltu gyriant allanol a lansio Time Machine eich hun. Oherwydd diogi, roeddwn yn aml yn gwneud copïau wrth gefn o'r fath unwaith bob ychydig wythnosau. Mae'n gwneud copïau wrth gefn yn awtomatig i'r gweinydd, nid wyf hyd yn oed yn sylwi pan fydd yn ei wneud. Rwy'n gweithio gartref, felly mae gennyf bob amser wrth gefn newydd o'm system gyfan. Mae copi yn cael ei wneud sawl gwaith y dydd, doeddwn i ddim yn cyfrif sawl gwaith a pha mor aml.

NAS

Dyma lle mae'r holl hud yn digwydd.

Mae gan Synology arf rhagorol, fe'i gelwir yn Cloud Sync, rwy'n meddwl o'r enw ei fod yn glir beth mae'n ei wneud.

Gall gydamseru llawer o systemau cwmwl â'i gilydd, neu yn fwy manwl gywir, cydamseru ffeiliau o weinydd NAS â chymylau eraill. Rwy'n meddwl bod adolygiad o'r rhaglen hon ar-lein. Nid af i fanylion. Byddai'n well i mi ddisgrifio sut rwy'n ei ddefnyddio.

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Ar y gweinydd mae gen i ffolder disg o'r enw Dropbox, mae'n gopi o fy nghyfrif Dropbox, Cloud Sync sy'n gyfrifol am gydamseru hyn i gyd. Os digwyddodd rhywbeth i'r ffeiliau yn Dropbox, bydd yn digwydd ar y gweinydd, nid oes ots a yw'n cael ei ddileu neu ei greu. Yn gyffredinol, cydamseru clasurol.

disg Yandex

Nesaf, rwy'n taflu'r holl ffeiliau hyn ar fy disg Yandex, rwy'n ei ddefnyddio fel disg wrth gefn cartref, hynny yw, rwy'n taflu'r ffeiliau yno ond peidiwch â dileu unrhyw beth oddi yno, mae'n troi allan i fod yn gymaint o domen o ffeiliau, ond roedd o gymorth cwpl o weithiau.

Google Drive

Yno rwy'n anfon y ffolder “Lluniau” yn unig, hefyd yn y modd cydamseru, dim ond ar gyfer gwylio lluniau cyfleus yn Google Photos y gwnaf hyn a gyda'r gallu i ddileu lluniau oddi yno ac maent yn cael eu dileu ym mhobman (ac eithrio disg Yandex wrth gwrs). Ysgrifennaf am y llun isod; gallech hyd yn oed ysgrifennu erthygl ar wahân yno.

HyperBackup

Ond nid yw hyn i gyd yn ddibynadwy iawn; os byddwch chi'n dileu ffeil yn ddamweiniol, bydd yn cael ei dileu ym mhobman a gallwch chi ystyried ei bod wedi'i cholli. Gallwch, wrth gwrs, adfer o ddisg Yandex, ond yn gyntaf, nid yw copi wrth gefn mewn un lle yn ddibynadwy iawn ynddo'i hun, ac nid yw disg Yandex ei hun yn wasanaeth y gallwch chi fod yn 100% yn hyderus ynddo, er na fu unrhyw un erioed. problemau ag ef.

Felly, roeddwn bob amser yn ceisio storio ffeiliau yn rhywle arall, gyda system wrth gefn arferol.

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Mae gan Synology offeryn ar gyfer hyn hefyd, fe'i gelwir yn HyperBackup, mae'n gwneud copi wrth gefn o ffeiliau naill ai i weinyddion Synology eraill neu i rai datrysiadau cwmwl gan weithgynhyrchwyr trydydd parti.
Gall hefyd wneud copïau wrth gefn i yriannau allanol sy'n gysylltiedig â NAS, a dyna wnes i tan yn ddiweddar. Ond nid yw hyn hefyd yn ddibynadwy, er enghraifft, os oes tân, yna diwedd y gweinydd a'r HDD.

Synoleg C2

Yma yr ydym yn nesau yn raddol at wasanaeth arall, y tro hwn oddiwrth Synology ei hun. Mae ganddo ei gymylau ei hun ar gyfer storio copïau wrth gefn. Fe'i cynlluniwyd yn benodol ar gyfer HyperBackup, mae'n gwneud copïau wrth gefn yno bob dydd, ond mae hwn yn gopi wrth gefn sydd wedi'i feddwl yn ofalus, mae fersiynau ffeil, llinell amser, a hyd yn oed cleientiaid ar gyfer Windows a mac os.

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Mae hynny i gyd ar gyfer storio ffeiliau, rwy'n gobeithio bod fy ffeiliau'n ddiogel.

Nawr, gadewch i ni symud ymlaen i ddidoli'r ffeiliau.

Rwy'n didoli ffeiliau cyffredin, llyfrau, sganiau o ddogfennau a ffeiliau dibwys eraill i ffolderi â llaw, yn union fel popeth arall. Fel arfer nid oes llawer ohonynt ac anaml y byddaf yn eu hagor.

Y peth anoddaf yw didoli lluniau a fideos, mae gen i lawer ohonyn nhw.

Rwy'n cymryd o sawl dwsin i gannoedd o luniau'r mis. Rwy'n saethu gyda DSLR, drone ac weithiau ar fy ffôn. Gall lluniau fod yn bersonol neu ar gyfer stoc. Rwyf hefyd weithiau'n saethu fideos cartref (nid yr hyn y gallech ei feddwl, dim ond fideos teulu, yn aml gyda fy merch). Mae angen ei storio a'i ddidoli rywsut hefyd fel nad yw'n dod yn lanast.

Mae gen i ffolder yn yr un Dropbox o'r enw Sort Images, mae yna is-ffolderi lle mae'r holl luniau a fideos yn mynd, o'r fan honno maen nhw'n cael eu tynnu a'u didoli lle bo angen.

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Mae didoli yn digwydd ar weinydd NAS, mae yna sgriptiau bash yn rhedeg yno sy'n cael eu lansio'n awtomatig unwaith y dydd ac yn gwneud eu gwaith. Mae'r NAS hefyd yn gyfrifol am eu lansio; mae trefnydd tasgau sy'n gyfrifol am lansio'r holl sgriptiau a thasgau eraill. Gallwch chi ffurfweddu pa mor aml a phryd y bydd tasgau'n cael eu lansio, cron gyda rhyngwyneb os yw'n symlach.

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Mae gan bob ffolder ei sgript ei hun. Nawr mwy am ffolderi:

drôn - dyma luniau o drôn a dynnais at ddibenion personol. Yn gyntaf rwy'n prosesu'r holl luniau yn lightroom, yna rwy'n allforio JPG i'r ffolder hwn. Oddi yno maent yn y pen draw mewn ffolder Dropbox arall, "Llun".

Mae yna ffolder “Drone” ac yno maen nhw eisoes wedi'u didoli fesul blwyddyn a mis. Mae'r sgriptiau eu hunain yn creu'r ffolderi angenrheidiol ac yn ailenwi'r lluniau eu hunain yn ôl fy nhempled, fel arfer dyma'r dyddiad a'r amser y tynnwyd y llun, rwyf hefyd yn ychwanegu rhif ar hap ar y diwedd fel nad yw ffeiliau gyda'r un enw yn ymddangos. Nid wyf yn cofio pam nad oedd gosod eiliadau yn enw'r ffeil yn addas at y dibenion hyn.

Mae'r goeden yn edrych fel hyn: Llun/Drone/2019/05 — Mai/01 — Mai — 2019_19.25.53_37.jpg

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Fideo Drone - Nid wyf yn saethu fideo gyda drôn eto, mae llawer i'w ddysgu, nid oes gennyf amser ar ei gyfer nawr, ond rwyf eisoes wedi creu ffolder.

Gweithrediadau Delwedd - mae dau ffolder y tu mewn, pan ddarganfyddir ffeiliau yno, maent yn syml naill ai wedi'u cywasgu ar yr ochr uchaf i 2000px i'w cyhoeddi ar y Rhyngrwyd, neu mae delweddau'n cael eu troi, nid oes angen hyn arnaf mwyach, ond nid wyf wedi dileu'r ffolder eto.

Panoramâu - dyma lle mae panoramâu yn dod i mewn, fel y gallech chi ddyfalu, rydw i'n eu storio ar wahân gan fod hwn yn fath penodol o lun, rydw i fel arfer yn eu cymryd gyda drôn. Dwi hefyd yn gwneud panoramâu rheolaidd, ond dwi hefyd yn gwneud 360 panoramas ac weithiau sfferau, y math yma o banoramâu fel planedau bach, dwi hefyd yn ei wneud gyda drôn. O'r ffolder hon, mae'r holl luniau hefyd yn mynd i Photo/Panoramas/2019/01 - Mai - 2019_19.25.53_37.jpg. Yma dwi ddim yn sortio fesul mis achos does dim llawer o banoramâu.

Llun Personol — Dyma'r lluniau rydw i'n eu tynnu gyda DSLR, fel arfer mae'r rhain yn luniau teulu neu'n teithio, yn gyffredinol, lluniau sy'n cael eu tynnu er cof ac i mi fy hun. Rwyf hefyd yn prosesu lluniau amrwd yn Lightroom ac yna'n eu hallforio yma.

Oddi yma maen nhw'n cyrraedd: Llun/2019/05 — Mai/01 — Mai — 2019_19.25.53_37.jpg

Pe bawn i'n tynnu llun o ryw fath o ddathliad neu rywbeth arall y byddai'n well ei storio ar wahân, yna yn ffolder 2019 rydw i'n creu ffolder gydag enw'r dathliad ac yn copïo'r llun yno â llaw.

RAW - dyma ffynonellau'r lluniau. Rwyf bob amser yn saethu yn RAW, rwy'n storio'r holl luniau yn JPG, ond weithiau rwyf am storio ffeiliau RAW hefyd, weithiau rwyf am brosesu ffrâm yn wahanol. Fel arfer natur yw hyn a dim ond yr ergydion gorau sy'n cyrraedd yno, nid pob un ohonynt.

Llun Stoc - yma rwy'n uwchlwytho lluniau ar gyfer lluniau stoc, yr wyf yn eu cymryd naill ai ar DSLR neu ar drôn. Mae didoli yr un peth ag mewn lluniau eraill, dim ond yn ei ffolder ar wahân ei hun.

Yng nghyfeiriadur gwraidd Dropbox, mae ffolder Llwythiadau Camera, dyma'r ffolder rhagosodedig y mae'r rhaglen symudol Dropbox yn uwchlwytho'r holl luniau a fideos ynddo. Mae pob llun o'r wraig o'r ffôn yn cael ei ollwng fel hyn. Rwyf hefyd yn uwchlwytho fy holl luniau a fideos o fy ffôn yma ac oddi yno rwy'n eu didoli i ffolder ar wahân. Ond dwi'n ei wneud mewn ffordd wahanol, yn fwy cyfleus i mi. Mae yna raglen o'r fath ar gyfer Android, FolderSync, mae'n caniatáu ichi dynnu'r holl luniau o'ch ffôn symudol, eu huwchlwytho i Dropbox ac yna eu dileu o'r ffôn. Mae yna lawer o leoliadau, rwy'n ei argymell. Mae fideos o'ch ffôn hefyd yn mynd i'r ffolder hwn; maent hefyd yn cael eu didoli fel pob llun, yn ôl blwyddyn a mis.

Cesglais yr holl sgriptiau fy hun o wahanol gyfarwyddiadau ar y Rhyngrwyd; ni wnes i ddod o hyd i unrhyw atebion parod. Nid wyf yn gwybod unrhyw beth o gwbl am sgriptiau bash, efallai bod rhai gwallau neu y gellid gwneud rhai pethau'n well, ond y peth pwysicaf i mi yw eu bod yn gwneud eu gwaith ac yn gwneud yr hyn sydd ei angen arnaf.

Llwythwyd y sgriptiau i GitHub: https://github.com/pelinoleg/bash-scripts

Yn flaenorol, i ddidoli lluniau a fideos, defnyddiais Hazel o dan mac os, mae popeth yn haws yno, mae'r holl dasgau'n cael eu creu yn weledol, nid oes angen ysgrifennu cod, ond mae dwy anfantais. Yn gyntaf, mae angen i chi gadw'r holl ffolderi ar y cyfrifiadur fel bod popeth yn gweithio'n dda, ac yn ail, os byddaf yn newid yn sydyn i Windows neu Linux, nid oes unrhyw raglenni o'r fath yno. Ceisiais chwilio am ddewis arall ond nid oeddent i gyd yn ofer. Mae datrysiad gyda sgriptiau ar y gweinydd yn ddatrysiad mwy cyffredinol.

Mae'r holl sgriptiau wedi'u ffurfweddu i'w gweithredu unwaith y dydd, gyda'r nos fel arfer. Ond os nad oes gennych amser i aros a bod angen rhywsut i weithredu'r sgript ofynnol nawr, mae dau ateb: cysylltu trwy SSH i'r gweinydd a gweithredu'r sgript ofynnol, neu ewch i'r panel gweinyddol a rhedeg y sgript ofynnol â llaw. Mae hyn i gyd yn ymddangos yn anghyfleus i mi, felly darganfyddais drydydd ateb. Mae yna raglen ar gyfer Android sy'n gallu anfon gorchmynion ssh. Creais sawl gorchymyn, mae gan bob un ei botwm ei hun, a nawr os oes angen i mi ddidoli, er enghraifft, lluniau a dynnais o ddrôn, yna rwy'n pwyso un botwm ac mae'r sgript yn rhedeg. Gelwir y rhaglen yn SSHing, mae yna rai tebyg, ond i mi dyma'r mwyaf cyfleus.

Storio a didoli lluniau a ffeiliau eraill yn awtomatig. Gweithio gyda storio ffeiliau yn seiliedig ar Synology NAS

Mae gen i hefyd nifer o fy gwefannau fy hun, maen nhw'n fwy i'w dangos, nid oes bron neb yn mynd yno, ond nid yw'n brifo gwneud copi wrth gefn o hyd. Rwy'n rhedeg fy safleoedd ar DigitalOcean, lle gosodais y panel aaPanel. Yno mae'n bosibl gwneud copïau wrth gefn o'r holl ffeiliau a'r holl gronfeydd data, ond ar yr un ddisg.

Nid yw storio copi wrth gefn ar yr un ddisg yn wir, felly rydw i hefyd yn defnyddio sgript bash i fynd yno a chopïo popeth i'm gweinydd, gan archifo popeth mewn un archif gyda'r dyddiad yn yr enw.

Rwy'n gobeithio o leiaf y bydd rhywun yn cael ei helpu gan y dulliau yr wyf yn eu defnyddio ac y gwnes i rannu â nhw.

Fel y gwelir o'r erthygl, rwyf wrth fy modd ag awtomeiddio ac yn ceisio awtomeiddio popeth sy'n bosibl, ni ddisgrifiais lawer o bethau o safbwynt awtomeiddio, gan fod y rhain eisoes yn bynciau eraill ac yn erthyglau eraill.

Ffynhonnell: hab.com

Ychwanegu sylw