तुमच्या PC वर न जाता एका क्लाउडवरून दुसर्‍या क्लाउडवर फायली कशा हस्तांतरित करायच्या

मृत्यू, घटस्फोट आणि स्थलांतर या कोणत्याही व्यक्तीच्या जीवनातील तीन सर्वात तणावपूर्ण परिस्थिती आहेत.
"अमेरिकन भयपट कथा".

- एंड्रुख, मी घर सोडत आहे, मला हलवण्यास मदत करा, सर्व काही माझ्यात बसणार नाही :(
- ठीक आहे, तेथे किती आहेत?
— टन* 7-8...
*टन (जार्ग) - टेराबाइट.

अलीकडे, इंटरनेटवर सर्फिंग करताना, माझ्या लक्षात आले की विविध प्रकारचे डेटा स्थलांतरित करण्याच्या पद्धती आणि मॉडेल्सबद्दल बर्याच सामग्रीची हॅब्रे आणि तत्सम संसाधने उपलब्ध असूनही, या विषयावरील प्रश्न अजूनही इंटरनेटवर दिसतात. जे, काही कारणास्तव, नेहमी तपशीलवार उत्तरे प्राप्त करत नाहीत. या वस्तुस्थितीमुळे मला एके दिवशी तत्सम समाधानाच्या अंमलबजावणीवर नोट्स गोळा करण्यास आणि त्यांना वेगळ्या पोस्टच्या रूपात व्यवस्था करण्यास प्रवृत्त केले.

सर्वसाधारणपणे, मला काही त्रासदायक वारंवारतेसह एका डिव्हाइस, सिस्टम आणि सेवेवरून डेटा हस्तांतरित करावा लागतो. ज्याने, चाचणी आणि त्रुटीद्वारे, मला केवळ बर्याच मनोरंजक उत्पादनांशी परिचित होण्यास परवानगी दिली नाही तर मला ज्या सोल्यूशनबद्दल बोलायचे आहे त्याची कार्यक्षमता आणि किंमत यांच्यातील संतुलन देखील शोधले.

डिझाइन

डिझाइन आणि सर्वेक्षणाच्या कामाच्या परिणामी, स्थलांतर प्रक्रियेची गुणवत्ता आणि कार्यक्षमता केवळ डेटा असलेल्या किंवा असलेल्या "साइट्स" च्या तांत्रिक वैशिष्ट्यांवर अवलंबून नाही तर त्यांच्या भौतिक स्थानावर देखील अवलंबून आहे.

मायग्रेशन मॅनेजर हा एक संगणकीय नोड आहे ज्यावर प्रक्रियेचे “लॉजिक”-माइग्रेशन व्यवस्थापित करण्यासाठी सॉफ्टवेअर-कार्ये करतात.

म्हणजेच, "स्थलांतर व्यवस्थापक" ठेवण्यासाठी दोन मॉडेल आहेत

• मॉडेल ए. जर कमीतकमी एका साइटवर स्थानिक नेटवर्कमधून प्रवेश केला जाऊ शकतो, तर त्याच नेटवर्कवर "स्थलांतर व्यवस्थापक" ठेवणे योग्य आहे. कारण कार्यप्रदर्शन आणि स्थलांतर वेळ अद्याप साइट्सना जोडणाऱ्या चॅनेलच्या वेग आणि अपटाइमद्वारे मर्यादित आहे.
• मॉडेल बी. जर डेटाचा स्त्रोत आणि प्राप्तकर्ता या दोघांना स्थानिक नेटवर्कच्या बाहेर प्रवेश असेल, तर “स्थलांतर व्यवस्थापक” असा असावा जिथे चॅनेलचा वेग आणि अपटाइम स्पष्टपणे अधिक चांगला असेल.

उपरोक्त कसे तरी विघटित करण्यासाठी, मी लेखाच्या मुख्य प्रश्नातून कार्यांवर परत जाण्याचा आणि त्यांना तांत्रिक वैशिष्ट्यांमध्ये औपचारिक करण्याचा प्रस्ताव देतो.

प्रथम, मी वापरत असलेले सॉफ्टवेअर क्लाउडला सपोर्ट करते की नाही हे शोधणे आवश्यक आहे: Mail.ru, Yandex, Google Drive, Mega, Nextloud?

लहान उत्तर आहे: "होय!"

मी वापरतो रक्तरंजित.

Rclone - क्लाउड स्टोरेजसाठी rsync. 45 पेक्षा जास्त प्रकार आणि स्टोरेजच्या प्रकारांसह फाइल्स आणि फोल्डर्स सिंक्रोनाइझ करण्यासाठी डिझाइन केलेले मुक्त स्त्रोत सॉफ्टवेअर.

त्यापैकी काही येथे आहेत:
— अलीबाबा क्लाउड (अलियुन) ऑब्जेक्ट स्टोरेज सिस्टम (OSS)
- ऍमेझॉन S3
- सेफ
—डिजिटल ओशन स्पेस
- ड्रॉपबॉक्स
- Google क्लाउड स्टोरेज
- Google ड्राइव्ह
- Google Photos
- HTTP
-IBM COS S3
— Mail.ru क्लाउड
-मेगा
- मायक्रोसॉफ्ट अझर ब्लॉब स्टोरेज
- मायक्रोसॉफ्ट वनड्राईव्ह
- मिनीओ
- नेक्स्ट क्लाउड
- ओपनस्टॅक स्विफ्ट
- ओरॅकल क्लाउड स्टोरेज
— स्वतःचे क्लाउड
- रॅकस्पेस क्लाउड फाइल्स
- rsync.net
- SFTP
- WebDAV
- यांडेक्स डिस्क

ओस्नोवोय फंक्शनल:
— MD5/SHA1 हॅश वापरून फाइल्सची अखंडता तपासत आहे.
- फाइल्स तयार / बदलण्यासाठी टाइमस्टॅम्प जतन करणे.
- आंशिक सिंक्रोनाइझेशनचे समर्थन करते.
- फक्त नवीन फाइल्स कॉपी करणे.
- सिंक्रोनाइझेशन (एक-मार्ग).
- फाइल्स तपासत आहे (हॅशद्वारे).
- एका क्लाउड खात्यातून दुस-या खात्यात सिंक्रोनाइझ करण्याची क्षमता.
- एनक्रिप्शन समर्थन.
- स्थानिक फाइल कॅशिंगसाठी समर्थन.
— FUSE द्वारे क्लाउड सेवा माउंट करण्याची क्षमता.

मी स्वत: जोडेन की Rclone देखील डेटा बॅकअप स्वयंचलित करण्याशी संबंधित समस्यांचा सिंहाचा वाटा सोडविण्यात मला मदत करते. प्रकल्प "Väinämöinen".

पुढील कार्य "स्थलांतर व्यवस्थापक" प्लेसमेंट मॉडेल निवडणे आहे.

सर्व डेटा स्रोत, जे विविध सार्वजनिक क्लाउड सेवा आहेत, इंटरनेटद्वारे प्रवेशयोग्य आहेत. API द्वारे समावेश. तीन पैकी दोन रिसीव्हर हेच करतात. नेक्स्टक्लाउड स्वतः कुठे तैनात आहे आणि त्यासाठी कोणता प्रवेश उपलब्ध आहे हे स्पष्ट नाही?

मी पाच संभाव्य पर्याय मोजले:

1. तुमच्या होम/कॉर्पोरेट नेटवर्कमधील तुमच्या स्वतःच्या सर्व्हरवर.
2. सेवा प्रदात्याच्या डेटा सेंटरच्या भाड्याने घेतलेल्या रॅकमध्ये तुमच्या स्वतःच्या सर्व्हरवर.
3. सेवा प्रदात्याकडून भाड्याने घेतलेल्या सर्व्हरवर.
4. व्हर्च्युअल सर्व्हरवर (VDS/VPS) सेवा/होस्टिंग प्रदात्यासह 
5. सेवा प्रदात्याकडून सास मॉडेलनुसार

नेक्स्टक्लाउड हे क्लाउड स्टोरेज तयार करण्यासाठी आणि वापरण्यासाठी अजूनही सॉफ्टवेअर आहे हे लक्षात घेऊन, आम्ही सुरक्षितपणे म्हणू शकतो की इंटरनेटद्वारे त्याचा प्रवेश पाचही पर्यायांमध्ये उपलब्ध आहे. आणि या प्रकरणात, "स्थलांतर व्यवस्थापक" ठेवण्यासाठी इष्टतम मॉडेल असेल - मॉडेल बी.

“मायग्रेशन मॅनेजर” साठी प्लॅटफॉर्म म्हणून निवडलेल्या मॉडेलनुसार, मी माझ्या दृष्टिकोनातून, इष्टतम पर्यायांपैकी एक निवडेन - एक व्हर्च्युअल सर्व्हर M9 डेटा सेंटर रशियाचा सर्वात मोठा इंटरनेट ट्रॅफिक एक्सचेंज पॉइंट MSK-IX.

तिसरा निर्णय घ्यायचा आहे तो म्हणजे व्हर्च्युअल सर्व्हर कॉन्फिगरेशनवर निर्णय घेणे. 

व्हीडीएस कॉन्फिगरेशन पॅरामीटर्स निवडताना, आपल्याला आवश्यक कार्यप्रदर्शनाद्वारे मार्गदर्शन करणे आवश्यक आहे, जे साइट्समधील चॅनेलची रुंदी, हलविल्या जाणार्‍या फायलींची संख्या आणि आकार, स्थलांतर प्रवाह आणि सेटिंग्जची संख्या यावर अवलंबून असते. OS साठी, Rclone हे क्रॉस-प्लॅटफॉर्म सॉफ्टवेअर आहे जे Windows आणि Linux सह विविध ऑपरेटिंग सिस्टमवर चालते.

जर आपण अनेक स्थलांतर प्रक्रिया सुरू करण्याची योजना आखत असाल आणि अगदी विशिष्ट वारंवारतेवर, तर संसाधनांसाठी देय देऊन व्हीडीएस भाड्याने घेण्याचा पर्याय विचारात घेण्यासारखे आहे.

निर्मिती

वरील आधारावर, या लेखासाठी प्रोटोटाइप तयार करताना, मी खालील कॉन्फिगरेशनमध्ये VDS निवडले.

560 रूबल / महिना खर्च. कूपन वापरून 15% सूट समाविष्ट आहे NOSTRESS.

ही निवड या वस्तुस्थितीमुळे आहे की Windows OS अंतर्गत नोड, आमच्या तांत्रिक वैशिष्ट्यांच्या अटींचे पालन करण्यासाठी, ऑर्डरसाठी उपलब्ध असलेल्या इतर OS पेक्षा कॉन्फिगर करणे सोपे आहे.

ऑफटॉपिक: तसे, अधिक सुरक्षिततेसाठी, हा व्हर्च्युअल सर्व्हर एका नोडला नियुक्त केला आहे सुरक्षित आभासी नेटवर्क. आणि फक्त तेथूनच RDP द्वारे प्रवेश करण्याची परवानगी आहे...

VDS तयार केल्यानंतर आणि RDP द्वारे डेस्कटॉपवर प्रवेश मिळवल्यानंतर, तुम्हाला सर्वप्रथम Rclone आणि Web-GUI साठी वातावरण तयार करणे आवश्यक आहे. त्या. एक नवीन डीफॉल्ट ब्राउझर स्थापित करा, उदाहरणार्थ Chrome, सुरुवातीला स्थापित केलेले IE 11, दुर्दैवाने, नेहमी वापरलेल्या सॉफ्टवेअरसह योग्यरित्या कार्य करत नाही. 

वातावरण तयार केल्यानंतर, सॉफ्टवेअर पॅकेजसह संग्रहण डाउनलोड करा विंडोजसाठी आरक्लोन आणि ते अनपॅक करा. 

पुढे, विंडोज कमांड लाइन मोडमध्ये, एक्सट्रॅक्ट केलेल्या फाइल्ससह फोल्डरमध्ये जाण्यासाठी कमांड कार्यान्वित करा. माझ्यासाठी ते प्रशासकाच्या होम फोल्डरमध्ये स्थित आहे:

C:UsersAdministrator>cd rclone

संक्रमणानंतर, आम्ही वेब-GUI वरून Rclone लाँच करण्यासाठी कमांड कार्यान्वित करतो:

C:UsersAdministratorrclone>rclone rcd --rc-web-gui --rc-user=”login” --rc-pass=”password” -L

जिथे "लॉगिन" आणि "पासवर्ड" हे तुम्ही निर्दिष्ट केलेले लॉगिन आणि पासवर्ड आहेत, अर्थातच, कोट्सशिवाय.

कमांड कार्यान्वित केल्यावर, टर्मिनल प्रदर्शित होईल

2020/05/17 22:34:10 NOTICE: Web GUI exists. Update skipped.
2020/05/17 22:34:10 NOTICE: Serving Web GUI
2020/05/17 22:34:10 NOTICE: Serving remote control on http://127.0.0.1:5572/

आणि Rclone ग्राफिकल वेब इंटरफेस ब्राउझरमध्ये आपोआप उघडतो.

वेब-जीयूआय अद्याप चाचणी आवृत्तीच्या टप्प्यात आहे आणि कमांड लाइन इंटरफेसमध्ये असलेल्या सर्व Rclone व्यवस्थापन क्षमता अद्याप नसल्या तरीही, डेटा स्थलांतरासाठी त्याची क्षमता पुरेशी आहे. आणि आणखी थोडे.

समायोजन

पुढील पायरी म्हणजे ज्या साइटवर डेटा आहे किंवा असेल तेथे कनेक्शन सेट करणे. आणि लाइनमधील पहिला मुख्य डेटा रिसीव्हर असेल - नेक्स्टक्लाउड.

1. हे करण्यासाठी, विभागात जा सेटिंग्ज वेब-GUI. 

2. नवीन कॉन्फिगरेशन - बटण तयार करण्यास प्रारंभ करत आहे नवीन कॉन्फिगरेशन.

3. साइटचे नाव - फील्ड सेट करा या ड्राइव्हचे नाव (तुमच्या संदर्भासाठी): पुढील ढग.

4. स्टोरेजचा प्रकार किंवा प्रकार निवडणे निवडा: Nextcloud आणि Owncloud साठी, मुख्य डेटा एक्सचेंज इंटरफेस WebDAV आहे.

5. पुढे, वर क्लिक करा पायरी 2: सेटअप ड्राइव्ह, कनेक्शन पॅरामीटर्सची सूची उघडा आणि भरा. 

- एक्सएनयूएमएक्स. URL शी कनेक्ट करण्यासाठी HTTP होस्टची URL — WebDAV इंटरफेसची हायपरटेक्स्ट लिंक. नेक्स्टक्लाउडमध्ये ते सेटिंग्जमध्ये स्थित आहेत - इंटरफेसच्या खालच्या डाव्या कोपर्यात.
- एक्सएनयूएमएक्स. तुम्ही वापरत असलेल्या Webdav साइटचे/सेवा/सॉफ्टवेअरचे नाव — WebDAV इंटरफेस नाव. फील्ड स्वतःसाठी पर्यायी आहे, जेणेकरून असे बरेच कनेक्शन असल्यास गोंधळात पडू नये.
- 5.3 वापरकर्ता नाव — अधिकृततेसाठी वापरकर्तानाव
- एक्सएनयूएमएक्स. पासवर्ड - अधिकृततेसाठी संकेतशब्द
- एक्सएनयूएमएक्स. वापरकर्ता/पास ऐवजी बेअरर टोकन (उदा. मॅकरून) आणि बेअरर टोकन मिळविण्यासाठी चालवण्याचा आदेश प्रगत पर्यायांमध्ये अतिरिक्त पॅरामीटर्स आणि अधिकृतता आदेश आहेत. ते माझ्या नेक्स्टक्लाउडमध्ये वापरले जात नाहीत.

6. पुढील क्लिक करा कॉन्फिगरेशन तयार करा आणि कॉन्फिगरेशन तयार केले आहे याची खात्री करण्यासाठी, विभागात जा कॉन्फिग वेब इंटरफेस... त्याच पृष्ठाद्वारे, नवीन तयार केलेले कॉन्फिगरेशन हटविले किंवा संपादित केले जाऊ शकते.

साइटवरील कनेक्शनची कार्यक्षमता तपासण्यासाठी, विभागात जा एक्सप्लोरर. १ रिमोट्स कॉन्फिगर केलेल्या साइटचे नाव प्रविष्ट करा आणि क्लिक करा ओपन. आपण फाइल्स आणि निर्देशिकांची सूची पाहिल्यास, साइटचे कनेक्शन कार्यरत आहे.

अधिक खात्री पटण्यासाठी, तुम्ही फोल्डर तयार/हटवू शकता किंवा वेब इंटरफेसद्वारे फाइल डाउनलोड/हटवू शकता.

कनेक्ट केलेले दुसरे प्लॅटफॉर्म Yandex डिस्क असेल.

• पहिले चार टप्पे नेक्स्टक्लाउड कनेक्शन प्रक्रियेसारखेच आहेत.
• पुढे, आम्ही सर्वकाही जसेच्या तसे सोडतो, म्हणजे, फील्डमध्ये पायरी 2: ड्राइव्ह सेट करा आम्ही त्यांना रिकामे ठेवतो आणि प्रगत पर्यायांमध्ये काहीही बदलत नाही.
• क्लिक करा कॉन्फिग तयार करा.
• यांडेक्स अधिकृतता पृष्ठ ब्राउझरमध्ये उघडेल, त्यानंतर आपल्याला यशस्वी कनेक्शनबद्दल आणि Rclone वर परत येण्याची ऑफर मिळाल्याबद्दल संदेश प्राप्त होईल.
• आम्ही काय करतो ते विभाग तपासा कॉन्फिगर.

स्थलांतर

जेव्हा आमच्याकडे दोन साइट कनेक्ट असतात, तेव्हा आम्ही त्यांच्या दरम्यान डेटा आधीच स्थलांतरित करू शकतो. ही प्रक्रिया नेक्स्टक्लाउडशी कनेक्शनची कार्यक्षमता तपासण्यासारखीच आहे, जी आम्ही आधी केली होती.

• जा एक्सप्लोरर.
• टेम्पलेट निवडत आहे 2-शेजारी.
• प्रत्येक मध्ये रिमोट्स तुमच्या साइटचे नाव सूचित करा.
• क्लिक करा ओपन.
• आम्ही त्या प्रत्येकासाठी फाइल्स आणि फोल्डर्सची निर्देशिका पाहतो.

स्थलांतर प्रक्रिया सुरू करण्यासाठी, डेटा स्त्रोत निर्देशिकेतील फायलींसह इच्छित फोल्डर निवडणे आणि त्यास गंतव्य निर्देशिकेत माउसने ड्रॅग करणे बाकी आहे.

उर्वरित साइट्स जोडण्याची आणि त्यांच्या दरम्यान डेटा स्थलांतरित करण्याची यंत्रणा वरील ऑपरेशन्ससारखीच आहे. तुमच्या कामादरम्यान तुम्हाला त्रुटी आढळल्यास, तुम्ही त्याबाबतच्या तपशीलांचा अभ्यास टर्मिनलमध्ये करू शकता जेथे Rclone with Web-GUI चालू आहे.

सर्वसाधारणपणे, साठी दस्तऐवजीकरण रक्तरंजित वेबसाइट आणि इंटरनेटवर विस्तृत आणि उपलब्ध आहे आणि वापरण्यात कोणतीही अडचण येऊ नये. यासह, मी तुमच्या पीसीला बायपास करून, एका क्लाउडवरून दुसर्‍या क्लाउडवर फाइल्स कशा हस्तांतरित करायच्या यावरील पहिल्या पोस्टचा विचार करतो, पूर्ण.

PS आपण शेवटच्या विधानाशी सहमत नसल्यास, टिप्पण्यांमध्ये लिहा: कोणता "विषय कव्हर केलेला नाही" आणि कोणत्या शिरामध्ये ते सुरू ठेवण्यासारखे आहे.

स्त्रोत: www.habr.com