તમારા પીસીમાંથી પસાર થયા વિના ફાઇલોને એક ક્લાઉડમાંથી બીજામાં કેવી રીતે સ્થાનાંતરિત કરવી

મૃત્યુ, છૂટાછેડા અને સ્થળાંતર એ કોઈપણ વ્યક્તિના જીવનમાં ત્રણ સૌથી તણાવપૂર્ણ પરિસ્થિતિઓ છે.
"અમેરીકા ની ડરાવણી વાર્તા".

- એન્ડ્રુખ, હું ઘર છોડી રહ્યો છું, મને ખસેડવામાં મદદ કરો, બધું મારી સાથે બંધબેસતું નથી :(
- ઠીક છે, ત્યાં કેટલા છે?
— ટન*7-8...
*ટન (જાર્ગ) - ટેરાબાઈટ.

તાજેતરમાં, ઈન્ટરનેટ પર સર્ફિંગ કરતી વખતે, મેં નોંધ્યું છે કે હેબ્રે અને વિવિધ પ્રકારના ડેટાને સ્થાનાંતરિત કરવા માટેની પદ્ધતિઓ અને મોડલ્સ વિશે ઘણી બધી સામગ્રીની ઉપલબ્ધતા હોવા છતાં, આ વિષય પરના પ્રશ્નો હજી પણ ઇન્ટરનેટ પર દેખાય છે. જે, કેટલાક કારણોસર, હંમેશા વિગતવાર જવાબો પ્રાપ્ત કરતા નથી. આ હકીકતે મને એક દિવસ સમાન ઉકેલના અમલીકરણ પર નોંધો એકત્રિત કરવા અને તેમને એક અલગ પોસ્ટના રૂપમાં ગોઠવવા માટે પ્રોત્સાહિત કર્યા.

સામાન્ય રીતે, મારે એક ઉપકરણ, સિસ્ટમ અને સેવામાંથી બીજામાં કેટલીક હેરાન આવર્તન સાથે ડેટા ટ્રાન્સફર કરવો પડશે. જે, અજમાયશ અને ભૂલ દ્વારા, મને માત્ર ઘણા બધા રસપ્રદ ઉત્પાદનોથી પરિચિત થવા માટે જ નહીં, પણ હું જે ઉકેલ વિશે વાત કરવા માંગુ છું તેની કાર્યક્ષમતા અને કિંમત વચ્ચે સંતુલન શોધવાની પણ મંજૂરી આપી.

ડિઝાઇન

જેમ જેમ તે ડિઝાઇન અને સર્વેક્ષણના કાર્યના પરિણામે બહાર આવ્યું છે, સ્થાનાંતરણ પ્રક્રિયાની ગુણવત્તા અને કાર્યક્ષમતા ફક્ત તે "સાઇટ્સ" ની તકનીકી લાક્ષણિકતાઓ પર જ નહીં, જ્યાં ડેટા છે અથવા સ્થિત હશે, પણ તેમના ભૌતિક સ્થાન પર પણ આધારિત છે.

માઈગ્રેશન મેનેજર એ એક કમ્પ્યુટીંગ નોડ છે જેના પર પ્રક્રિયાનું "તર્ક" - સ્થળાંતરનું સંચાલન કરવા માટેનું સોફ્ટવેર - કાર્યો કરે છે.

એટલે કે, "માઇગ્રેશન મેનેજર" મૂકવા માટે બે મોડલ છે

• મોડલ એ. જો ઓછામાં ઓછી એક સાઇટને ફક્ત સ્થાનિક નેટવર્કમાંથી જ ઍક્સેસ કરી શકાય છે, તો તે જ નેટવર્ક પર "માઇગ્રેશન મેનેજર" મૂકવા યોગ્ય છે. કારણ કે સાઇટ્સને કનેક્ટ કરતી ચેનલની ઝડપ અને અપટાઇમ દ્વારા પ્રદર્શન અને સ્થળાંતરનો સમય હજુ પણ મર્યાદિત છે.
• મોડલ બી. જો ડેટાના સ્ત્રોત અને પ્રાપ્તકર્તા બંનેને સ્થાનિક નેટવર્કની બહારની ઍક્સેસ હોય, તો "માઇગ્રેશન મેનેજર" એ સ્થિત હોવું જોઈએ જ્યાં તેમની વચ્ચેની ચેનલની ઝડપ અને અપટાઇમ દેખીતી રીતે વધુ સારી હશે.

ઉપરોક્ત કોઈપણ રીતે વિઘટિત કરવા માટે, હું લેખના મુખ્ય પ્રશ્નમાંથી કાર્યો પર પાછા ફરવાનો અને તેમને તકનીકી વિશિષ્ટતાઓમાં ઔપચારિક બનાવવાનો પ્રસ્તાવ મૂકું છું.

પ્રથમ, મારે એ શોધવાની જરૂર છે કે હું જે સોફ્ટવેરનો ઉપયોગ કરું છું તે ક્લાઉડને સપોર્ટ કરે છે કે કેમ: Mail.ru, Yandex, Google Drive, Mega, Nextloud?

ટૂંકો જવાબ છે: "હા!"

હુ વાપરૂ છુ રક્લોન.

Rclone - ક્લાઉડ સ્ટોરેજ માટે rsync. 45 થી વધુ પ્રકારો અને સ્ટોરેજના પ્રકારો સાથે ફાઇલો અને ફોલ્ડર્સને સિંક્રનાઇઝ કરવા માટે રચાયેલ ઓપન સોર્સ સોફ્ટવેર.

અહીં તેમાંથી થોડાક છે:
— અલીબાબા ક્લાઉડ (અલીયુન) ઑબ્જેક્ટ સ્ટોરેજ સિસ્ટમ (OSS)
- એમેઝોન S3
- સેફ
- ડિજિટલ ઓશન સ્પેસ
- ડ્રૉપબૉક્સ
- ગૂગલ ક્લાઉડ સ્ટોરેજ
- ગુગલ ડ્રાઈવ
- Google Photos
- HTTP
-IBM COS S3
— Mail.ru ક્લાઉડ
- મેગા
- માઇક્રોસોફ્ટ એઝ્યુર બ્લોબ સ્ટોરેજ
- માઈક્રોસોફ્ટ વનડ્રાઈવ
- મિનીયો
- નેક્સ્ટ ક્લાઉડ
- ઓપનસ્ટેક સ્વિફ્ટ
- ઓરેકલ ક્લાઉડ સ્ટોરેજ
- પોતાના ક્લાઉડ
- રેક્સસ્પેસ ક્લાઉડ ફાઇલો
- rsync.net
- SFTP
- વેબડીએવી
- યાન્ડેક્ષ ડિસ્ક

ઓસ્નોવનોઈ ફંકસિઓનલ:
— MD5/SHA1 હેશનો ઉપયોગ કરીને ફાઇલોની અખંડિતતા તપાસી રહ્યું છે.
- ફાઇલો બનાવવા/બદલવા માટે ટાઇમસ્ટેમ્પ સાચવી રહ્યા છે.
- આંશિક સિંક્રનાઇઝેશનને સપોર્ટ કરે છે.
- ફક્ત નવી ફાઈલોની નકલ કરવી.
- સિંક્રોનાઇઝેશન (એક-માર્ગી).
- ફાઇલો તપાસી રહ્યું છે (હેશ દ્વારા).
- એક ક્લાઉડ એકાઉન્ટથી બીજામાં સિંક્રનાઇઝ કરવાની ક્ષમતા.
- એન્ક્રિપ્શન સપોર્ટ.
- સ્થાનિક ફાઇલ કેશીંગ માટે સપોર્ટ.
- FUSE દ્વારા ક્લાઉડ સેવાઓને માઉન્ટ કરવાની ક્ષમતા.

હું મારી જાતે ઉમેરું છું કે Rclone પણ મને ડેટા બેકઅપને સ્વચાલિત કરવા સંબંધિત સમસ્યાઓનો મોટો હિસ્સો ઉકેલવામાં મદદ કરે છે. પ્રોજેક્ટ "Väinämöinen".

આગળનું કાર્ય "માઇગ્રેશન મેનેજર" પ્લેસમેન્ટ મોડલ પસંદ કરવાનું છે.

તમામ ડેટા સ્ત્રોતો, જે વિવિધ જાહેર ક્લાઉડ સેવાઓ છે, ઈન્ટરનેટ દ્વારા સુલભ છે. API મારફતે સમાવેશ થાય છે. ત્રણમાંથી બે રીસીવરો તે જ કરે છે. તે સ્પષ્ટ નથી કે નેક્સ્ટક્લાઉડ પોતે ક્યાં તૈનાત છે અને તેના માટે કઈ ઍક્સેસ ઉપલબ્ધ છે?

મેં પાંચ સંભવિત વિકલ્પો ગણ્યા:

1. તમારા હોમ/કોર્પોરેટ નેટવર્કમાં તમારા પોતાના સર્વર પર.
2. સેવા પ્રદાતાના ડેટા સેન્ટરના ભાડે આપેલા રેકમાં તમારા પોતાના સર્વર પર.
3. સેવા પ્રદાતા પાસેથી ભાડે લીધેલા સર્વર પર.
4. સેવા/હોસ્ટિંગ પ્રદાતા સાથે વર્ચ્યુઅલ સર્વર (VDS/VPS) પર 
5. સેવા પ્રદાતા તરફથી SaaS મોડેલ અનુસાર

નેક્સ્ટક્લાઉડ હજી પણ ક્લાઉડ સ્ટોરેજ બનાવવા અને તેનો ઉપયોગ કરવા માટેનું સૉફ્ટવેર છે તે ધ્યાનમાં લેતા, અમે સુરક્ષિત રીતે કહી શકીએ કે ઇન્ટરનેટ દ્વારા તેની ઍક્સેસ તમામ પાંચ વિકલ્પોમાં ઉપલબ્ધ છે. અને આ કિસ્સામાં, "માઇગ્રેશન મેનેજર" મૂકવા માટેનું શ્રેષ્ઠ મોડેલ હશે - મોડેલ બી.

"માઇગ્રેશન મેનેજર" માટે પ્લેટફોર્મ તરીકે પસંદ કરેલ મોડેલ અનુસાર, હું મારા દૃષ્ટિકોણથી, વિકલ્પોમાંથી એક શ્રેષ્ઠ પસંદ કરીશ - એક વર્ચ્યુઅલ સર્વર M9 ડેટા સેન્ટર રશિયાનો સૌથી મોટો ઈન્ટરનેટ ટ્રાફિક એક્સચેન્જ પોઈન્ટ MSK-IX.

ત્રીજો નિર્ણય જે લેવાની જરૂર છે તે વર્ચ્યુઅલ સર્વર ગોઠવણી પર નિર્ણય લેવાનો છે. 

VDS રૂપરેખાંકન પરિમાણો પસંદ કરતી વખતે, તમારે જરૂરી પ્રદર્શન દ્વારા માર્ગદર્શન આપવાની જરૂર છે, જે સાઇટ્સ વચ્ચેની ચેનલોની પહોળાઈ, ખસેડવામાં આવી રહેલી ફાઇલોની સંખ્યા અને કદ, સ્થાનાંતરણ સ્ટ્રીમ્સની સંખ્યા અને સેટિંગ્સ પર આધારિત છે. OS માટે, Rclone એ ક્રોસ-પ્લેટફોર્મ સોફ્ટવેર છે જે Windows અને Linux સહિત વિવિધ ઓપરેટિંગ સિસ્ટમ્સ પર ચાલે છે.

જો તમે ઘણી સ્થળાંતર પ્રક્રિયાઓ શરૂ કરવાની યોજના ઘડી રહ્યા છો, અને તે પણ ચોક્કસ આવર્તન પર, તો પછી સંસાધનોની ચુકવણી સાથે VDS ભાડે આપવાના વિકલ્પને ધ્યાનમાં લેવું યોગ્ય છે.

બનાવટ

ઉપરના આધારે, આ લેખ માટે પ્રોટોટાઇપ બનાવતી વખતે, મેં નીચેના રૂપરેખાંકનમાં VDS પસંદ કર્યું.

560 રુબેલ્સ / મહિનો ખર્ચ. કૂપનનો ઉપયોગ કરીને 15% ડિસ્કાઉન્ટ સહિત નોસ્ટ્રેસ.

આ પસંદગી એ હકીકતને કારણે છે કે વિન્ડોઝ OS હેઠળ નોડ, અમારી તકનીકી વિશિષ્ટતાઓની શરતોનું પાલન કરવા માટે, ઓર્ડર માટે ઉપલબ્ધ અન્ય OS કરતાં ગોઠવવાનું સરળ છે.

ઑફટોપિક: માર્ગ દ્વારા, વધુ સુરક્ષા માટે, આ વર્ચ્યુઅલ સર્વર નોડ્સમાંથી એકને સોંપેલ છે સુરક્ષિત વર્ચ્યુઅલ નેટવર્ક. અને RDP મારફત તેની ઍક્સેસ ફક્ત ત્યાંથી જ માન્ય છે...

VDS બનાવ્યા પછી અને RDP દ્વારા ડેસ્કટોપની ઍક્સેસ મેળવ્યા પછી, તમારે જે પ્રથમ વસ્તુ કરવાની જરૂર છે તે છે Rclone અને Web-GUI માટે પર્યાવરણ તૈયાર કરવું. તે. નવું ડિફોલ્ટ બ્રાઉઝર ઇન્સ્ટોલ કરો, ઉદાહરણ તરીકે ક્રોમ, કારણ કે શરૂઆતમાં ઇન્સ્ટોલ કરેલ IE 11, કમનસીબે, ઉપયોગમાં લેવાતા સોફ્ટવેર સાથે હંમેશા યોગ્ય રીતે કામ કરતું નથી. 

પર્યાવરણ તૈયાર કર્યા પછી, સોફ્ટવેર પેકેજ સાથે આર્કાઇવ ડાઉનલોડ કરો વિન્ડોઝ માટે આરક્લોન અને તેને અનપેક કરો. 

આગળ, વિન્ડોઝ કમાન્ડ લાઇન મોડમાં, એક્સટ્રેક્ટેડ ફાઇલો સાથે ફોલ્ડર પર જવા માટે આદેશ ચલાવો. મારા માટે તે એડમિનિસ્ટ્રેટરના હોમ ફોલ્ડરમાં સ્થિત છે:

C:UsersAdministrator>cd rclone

સંક્રમણ પછી, અમે Web-GUI માંથી Rclone લોન્ચ કરવા માટે આદેશ ચલાવીએ છીએ:

C:UsersAdministratorrclone>rclone rcd --rc-web-gui --rc-user=”login” --rc-pass=”password” -L

જ્યાં "લોગિન" અને "પાસવર્ડ" એ તમે ઉલ્લેખિત કરેલ લોગિન અને પાસવર્ડ છે, અલબત્ત, અવતરણ વિના.

આદેશના અમલ પર, ટર્મિનલ પ્રદર્શિત થાય છે

2020/05/17 22:34:10 NOTICE: Web GUI exists. Update skipped.
2020/05/17 22:34:10 NOTICE: Serving Web GUI
2020/05/17 22:34:10 NOTICE: Serving remote control on http://127.0.0.1:5572/

અને Rclone ગ્રાફિકલ વેબ ઈન્ટરફેસ બ્રાઉઝરમાં આપમેળે ખુલે છે.

વેબ-જીયુઆઈ હજુ ટેસ્ટ વર્ઝન સ્ટેજમાં છે અને કમાન્ડ લાઇન ઈન્ટરફેસમાં હોય તેવી તમામ Rclone મેનેજમેન્ટ ક્ષમતાઓ હજુ સુધી નથી તે હકીકત હોવા છતાં, તેની ક્ષમતાઓ ડેટા માઈગ્રેશન માટે એકદમ પર્યાપ્ત છે. અને થોડું વધારે.

ગોઠવણ

આગળનું પગલું એ સાઇટ્સ પર કનેક્શન્સ સેટ કરવાનું છે જ્યાં ડેટા છે અથવા સ્થિત હશે. અને લાઇનમાં પ્રથમ મુખ્ય ડેટા રીસીવર હશે - નેક્સ્ટક્લાઉડ.

1. આ કરવા માટે, વિભાગ પર જાઓ રૂપરેખાઓ વેબ-GUI. 

2. નવું રૂપરેખાંકન બનાવવાની શરૂઆત કરી રહ્યા છીએ - બટન નવી રૂપરેખા.

3. સાઇટનું નામ - ક્ષેત્ર સેટ કરો આ ડ્રાઇવનું નામ (તમારા સંદર્ભ માટે): નેક્સ્ટ ક્લાઉડ.

4. સ્ટોરેજનો પ્રકાર અથવા પ્રકાર પસંદ કરી રહ્યા છીએ પસંદ કરો: નેક્સ્ટક્લાઉડ અને ઓનક્લાઉડ માટે, મુખ્ય ડેટા એક્સચેન્જ ઇન્ટરફેસ WebDAV છે.

5. આગળ, પર ક્લિક કરો પગલું 2: સેટઅપ ડ્રાઇવ, કનેક્શન પરિમાણોની સૂચિ ખોલો અને ભરો. 

- 5.1. URL થી કનેક્ટ કરવા માટે HTTP હોસ્ટનું URL — WebDAV ઇન્ટરફેસની હાઇપરટેક્સ્ટ લિંક. નેક્સ્ટક્લાઉડમાં તેઓ સેટિંગ્સમાં સ્થિત છે - ઇન્ટરફેસના નીચલા ડાબા ખૂણામાં.
- 5.2. તમે ઉપયોગ કરી રહ્યાં છો તે Webdav સાઇટ/સેવા/સોફ્ટવેરનું નામ — WebDAV ઈન્ટરફેસ નામ. ક્ષેત્ર તમારા માટે વૈકલ્પિક છે, જેથી આવા ઘણા જોડાણો હોય તો મૂંઝવણમાં ન આવે.
- 5.3 વપરાશકર્તા નામ - અધિકૃતતા માટે વપરાશકર્તા નામ
- 5.4. પાસવર્ડ - અધિકૃતતા માટે પાસવર્ડ
- 5.5. વપરાશકર્તા/પાસને બદલે બેરર ટોકન (દા.ત. મેકરૂન) અને બેરર ટોકન મેળવવા માટે દોડવાનો આદેશ અદ્યતન વિકલ્પોમાં વધારાના પરિમાણો અને અધિકૃતતા આદેશો છે. તેઓ મારા નેક્સ્ટક્લાઉડમાં ઉપયોગમાં લેવાતા નથી.

6. આગળ ક્લિક કરો રૂપરેખા બનાવો અને રૂપરેખાંકન બનાવેલ છે તેની ખાતરી કરવા માટે, વિભાગ પર જાઓ રૂપરેખા વેબ ઈન્ટરફેસ... એ જ પેજ દ્વારા, નવા બનાવેલ રૂપરેખાંકનને કાઢી અથવા સંપાદિત કરી શકાય છે.

સાઇટ પર કનેક્શનની કાર્યક્ષમતા તપાસવા માટે, વિભાગ પર જાઓ એક્સપ્લોરર... ક્ષેત્રમાં રીમોટ રૂપરેખાંકિત સાઇટનું નામ દાખલ કરો અને ક્લિક કરો ઓપન. જો તમે ફાઇલો અને ડિરેક્ટરીઓની સૂચિ જુઓ છો, તો સાઇટનું કનેક્શન કામ કરી રહ્યું છે.

વધુ ખાતરી કરવા માટે, તમે ફોલ્ડર બનાવી/ડીલીટ કરી શકો છો અથવા વેબ ઈન્ટરફેસ દ્વારા ફાઈલ ડાઉનલોડ/ડીલીટ કરી શકો છો.

કનેક્ટ કરવા માટેનું બીજું પ્લેટફોર્મ યાન્ડેક્ષ ડિસ્ક હશે.

• પ્રથમ ચાર પગલાં નેક્સ્ટક્લાઉડ કનેક્શન પ્રક્રિયા જેવા જ છે.
• આગળ, આપણે બધું જેમ છે તેમ છોડીએ છીએ, એટલે કે, ક્ષેત્રો અંદર પગલું 2: ડ્રાઇવ સેટ કરો અમે તેમને ખાલી છોડીએ છીએ અને અદ્યતન વિકલ્પોમાં કંઈપણ બદલતા નથી.
• ક્લિક કરો રૂપરેખા બનાવો.
• બ્રાઉઝરમાં યાન્ડેક્ષ અધિકૃતતા પૃષ્ઠ ખુલે છે, તે પછી તમને સફળ કનેક્શન અને Rclone પર પાછા ફરવાની ઑફર વિશેનો સંદેશ પ્રાપ્ત થાય છે.
• અમે શું કરીએ છીએ તે વિભાગ તપાસો રૂપરેખા.

સ્થળાંતર

જ્યારે અમારી પાસે બે સાઇટ્સ જોડાયેલ હોય, ત્યારે અમે તેમની વચ્ચે પહેલાથી જ ડેટા સ્થાનાંતરિત કરી શકીએ છીએ. પ્રક્રિયા પોતે નેક્સ્ટક્લાઉડ સાથે કનેક્શનની કાર્યક્ષમતા તપાસવા જેવી જ છે, જે અમે અગાઉ હાથ ધરી હતી.

• પર જાઓ એક્સપ્લોરર.
• નમૂનો પસંદ કરી રહ્યા છીએ 2-બાજુ બાજુ.
• દરેકમાં રીમોટ તમારી સાઇટનું નામ સૂચવો.
• ક્લિક કરો ઓપન.
• અમે તેમાંના દરેક માટે ફાઇલો અને ફોલ્ડર્સની ડિરેક્ટરી જોઈએ છીએ.

સ્થળાંતર પ્રક્રિયા શરૂ કરવા માટે, જે બાકી છે તે ડેટા સ્ત્રોત નિર્દેશિકામાં ફાઇલો સાથે ઇચ્છિત ફોલ્ડર પસંદ કરવાનું છે અને તેને માઉસ વડે ગંતવ્ય નિર્દેશિકા પર ખેંચો.

બાકીની સાઇટ્સ ઉમેરવા અને તેમની વચ્ચે ડેટા સ્થાનાંતરિત કરવા માટેની પદ્ધતિ ઉપરોક્ત કામગીરી જેવી જ છે. જો તમને તમારા કામ દરમિયાન ભૂલો આવે છે, તો તમે ટર્મિનલમાં તેમના વિશેની વિગતોનો અભ્યાસ કરી શકો છો જ્યાં Web-GUI સાથે Rclone ચાલી રહ્યું છે.

સામાન્ય રીતે, માટે દસ્તાવેજીકરણ રક્લોન વેબસાઈટ અને ઈન્ટરનેટ પર વ્યાપક અને ઉપલબ્ધ છે, અને ઉપયોગમાં કોઈ મુશ્કેલી ઊભી થવી જોઈએ નહીં. આ સાથે, હું તમારા પીસીને બાયપાસ કરીને, ફાઇલોને એક ક્લાઉડથી બીજામાં કેવી રીતે સ્થાનાંતરિત કરવી તે અંગેની પ્રથમ પોસ્ટને ધ્યાનમાં લઈશ.

PS જો તમે છેલ્લા નિવેદન સાથે સંમત ન હોવ, તો ટિપ્પણીઓમાં લખો: કયો "વિષય આવરી લેવામાં આવ્યો નથી" અને તે કઈ નસમાં ચાલુ રાખવા યોગ્ય છે.

સોર્સ: www.habr.com