तपाइँको पीसी मार्फत नजाइकन एक क्लाउडबाट अर्कोमा फाइलहरू कसरी स्थानान्तरण गर्ने

मृत्यु, सम्बन्धविच्छेद, र सर्ने कुनै पनि व्यक्तिको जीवनमा तीनवटा सबैभन्दा तनावपूर्ण अवस्थाहरू हुन्।
"अमेरिकन भूतको कथा"।

- एन्ड्रिउख, म घर छोड्दै छु, मलाई सार्न मद्दत गर्नुहोस्, सबै कुरा मसँग मिल्दैन :(
- ठीक छ, त्यहाँ कति छन्?
- टन * 7-8...
* टन (जार्ग) - टेराबाइट।

भर्खरै, इन्टरनेट सर्फिंग गर्दा, मैले याद गरें कि Habré मा उपलब्धता र विभिन्न प्रकारका डाटा माइग्रेट गर्नका लागि विधिहरू र मोडेलहरूको बारेमा धेरै सामग्रीहरूको समान स्रोतहरूको बावजुद, यस विषयमा प्रश्नहरू अझै पनि इन्टरनेटमा देखा पर्छन्। जुन, केहि कारणका लागि, सधैं विस्तृत जवाफहरू प्राप्त गर्दैन। यो तथ्यले मलाई एक दिन समान समाधानको कार्यान्वयनमा नोटहरू सङ्कलन गर्न र तिनीहरूलाई छुट्टै पोस्टको रूपमा व्यवस्थित गर्न प्रेरित गर्‍यो।

सामान्यतया, मैले केहि कष्टप्रद फ्रिक्वेन्सीको साथ एक उपकरण, प्रणाली र सेवाबाट अर्कोमा डाटा स्थानान्तरण गर्नुपर्छ। जुन, परीक्षण र त्रुटि मार्फत, मलाई धेरै रोचक उत्पादनहरूसँग परिचित हुन अनुमति दिईयो, तर मैले कुरा गर्न चाहने समाधानको कार्यक्षमता र लागत बीचको सन्तुलन फेला पार्न पनि।

डिजाईन

यो डिजाइन र सर्वेक्षण कार्यको परिणामको रूपमा बाहिर निस्कियो, माइग्रेसन प्रक्रियाको गुणस्तर र दक्षता केवल "साइटहरू" को प्राविधिक विशेषताहरूमा निर्भर गर्दछ जहाँ डाटा छ वा अवस्थित हुनेछ, तर तिनीहरूको भौतिक स्थानमा पनि।

माइग्रेसन प्रबन्धक एक कम्प्युटिङ्ग नोड हो जसमा प्रक्रियाको "तर्क" - माइग्रेसन प्रबन्ध गर्न सफ्टवेयर - कार्यहरू।

त्यो हो, त्यहाँ "माइग्रेसन प्रबन्धक" राख्नको लागि दुई मोडेलहरू छन्

• मोडल ए। यदि कम्तिमा एक साइटहरू स्थानीय सञ्जाल भित्रबाट मात्र पहुँच गर्न सकिन्छ भने, त्यसोभए यो समान नेटवर्कमा "माइग्रेसन प्रबन्धक" राख्न लायक छ। किनभने कार्यसम्पादन र माइग्रेसन समय अझै पनि साइटहरू जडान गर्ने च्यानलको गति र अपटाइम द्वारा सीमित छ।
• मोडेल बि। यदि डेटाको स्रोत र प्राप्तकर्ता दुबै स्थानीय नेटवर्क बाहिर पहुँच छ भने, "माइग्रेसन प्रबन्धक" अवस्थित हुनुपर्छ जहाँ तिनीहरू बीचको च्यानलको गति र अपटाइम स्पष्ट रूपमा राम्रो हुनेछ।

माथिको कुनै न कुनै रूपमा विघटन गर्नको लागि, म लेखको मुख्य प्रश्नबाट कार्यहरूमा फर्कन र तिनीहरूलाई प्राविधिक विशिष्टताहरूमा औपचारिक रूपमा प्रस्ताव गर्दछु।

पहिले, मैले प्रयोग गरिरहेको सफ्टवेयरले क्लाउडहरूलाई समर्थन गर्छ कि भनेर पत्ता लगाउन आवश्यक छ: Mail.ru, Yandex, Google Drive, Mega, Nextloud?

छोटो जवाफ हो: "हो!"

म प्रयोग गर्छु रेक्लोन.

Rclone - क्लाउड भण्डारणको लागि rsync। 45 भन्दा बढी प्रकार र भण्डारणका प्रकारहरूसँग फाइलहरू र फोल्डरहरू सिङ्क्रोनाइज गर्न डिजाइन गरिएको खुला स्रोत सफ्टवेयर।

यहाँ तिनीहरूमध्ये केही मात्र छन्:
- अलीबाबा क्लाउड (अलियुन) वस्तु भण्डारण प्रणाली (OSS)
- Amazon S3
- सेफ
-डिजिटल ओशन स्पेस
- ड्रपबक्स
- गुगल क्लाउड भण्डारण
- गुगल ड्राइव
- गुगल फोटोहरू
- HTTP
-IBM COS S3
- Mail.ru क्लाउड
- मेगा
- माइक्रोसफ्ट Azure ब्लब भण्डारण
- Microsoft OneDrive
- Minio
- अर्को बादल
- ओपनस्ट्याक स्विफ्ट
- ओरेकल क्लाउड भण्डारण
- आफ्नै क्लाउड
- Rackspace क्लाउड फाइलहरू
- rsync.net
- SFTP
- WebDAV
- यान्डेक्स डिस्क

मुख्य कार्यक्षमता:
— MD5/SHA1 ह्यासहरू प्रयोग गरेर फाइलहरूको अखण्डता जाँच गर्दै।
- फाइलहरू सिर्जना / परिवर्तन गर्नका लागि टाइमस्ट्याम्पहरू बचत गर्दै।
- आंशिक सिंक्रोनाइजेसन समर्थन गर्दछ।
- नयाँ फाइलहरू मात्र प्रतिलिपि गर्दै।
- सिंक्रोनाइजेसन (एकतर्फी)।
- फाइलहरू जाँच गर्दै (ह्यासहरू द्वारा)।
- एक क्लाउड खाताबाट अर्कोमा सिङ्क्रोनाइज गर्ने क्षमता।
- एन्क्रिप्शन समर्थन।
- स्थानीय फाइल क्यासिङ लागि समर्थन।
- FUSE मार्फत क्लाउड सेवाहरू माउन्ट गर्ने क्षमता।

म आफैं थप्छु कि Rclone ले मलाई डाटा ब्याकअप स्वचालित गर्न सम्बन्धित समस्याहरूको सिंहको हिस्सा समाधान गर्न मद्दत गर्दछ। परियोजना "Väinämöinen".

अर्को कार्य "माइग्रेसन प्रबन्धक" प्लेसमेन्ट मोडेल चयन गर्नु हो।

सबै डेटा स्रोतहरू, जुन विभिन्न सार्वजनिक क्लाउड सेवाहरू हुन्, इन्टरनेट मार्फत पहुँचयोग्य छन्। API मार्फत सहित। तीन मध्ये दुई रिसीभरहरूले त्यसै गर्छन्। यो स्पष्ट छैन कि नेक्स्टक्लाउड आफैं कहाँ तैनात गरिएको छ र यसमा के पहुँच उपलब्ध छ?

मैले पाँच सम्भावित विकल्पहरू गणना गरें:

1. तपाईको घर/कर्पोरेट नेटवर्कमा तपाईको आफ्नै सर्भरमा।
2. सेवा प्रदायकको डाटा सेन्टरको भाडाको र्याकमा तपाईंको आफ्नै सर्भरमा।
3. सेवा प्रदायकबाट भाडामा लिइएको सर्भरमा।
4. भर्चुअल सर्भरमा (VDS/VPS) सेवा/होस्टिङ प्रदायकसँग 
5. सेवा प्रदायकबाट SaaS मोडेल अनुसार

नेक्स्टक्लाउड अझै पनि क्लाउड भण्डारण सिर्जना गर्न र प्रयोग गर्ने सफ्टवेयर हो भन्ने कुरालाई ध्यानमा राख्दै, हामी सुरक्षित रूपमा भन्न सक्छौं कि इन्टरनेट मार्फत यसमा पहुँच सबै पाँच विकल्पहरूमा उपलब्ध छ। र यस अवस्थामा, "माइग्रेसन प्रबन्धक" राख्नको लागि इष्टतम मोडेल - मोडेल बि.

"माइग्रेसन प्रबन्धक" को लागि प्लेटफर्मको रूपमा छनौट गरिएको मोडेल अनुसार, म मेरो दृष्टिकोणबाट, विकल्पहरू मध्ये एक इष्टतम छनौट गर्नेछु - एक भर्चुअल सर्भर। M9 डाटा केन्द्र रूसको सबैभन्दा ठूलो इन्टरनेट ट्राफिक विनिमय बिन्दु MSK-IX।

बनाउनु पर्ने तेस्रो निर्णय भनेको भर्चुअल सर्भर कन्फिगरेसनमा निर्णय गर्नु हो। 

VDS कन्फिगरेसन प्यारामिटरहरू छनौट गर्दा, तपाईंले आवश्यक कार्यसम्पादनद्वारा निर्देशित हुन आवश्यक छ, जुन साइटहरू बीचको च्यानलहरूको चौडाइ, फाइलहरूको संख्या र साइज सारिएको, माइग्रेसन स्ट्रिमहरू र सेटिङहरूको संख्यामा निर्भर गर्दछ। OS को लागि, Rclone क्रस-प्लेटफर्म सफ्टवेयर हो जुन Windows र Linux सहित विभिन्न अपरेटिङ सिस्टमहरूमा चल्छ।

यदि तपाइँ धेरै माइग्रेसन प्रक्रियाहरू सुरु गर्ने योजना बनाउनुहुन्छ, र एक निश्चित फ्रिक्वेन्सीमा पनि, त्यसपछि यो स्रोतहरूको लागि भुक्तानीको साथ VDS भाडामा लिने विकल्पलाई विचार गर्न लायक छ।

सिर्जना

माथिको आधारमा, यस लेखको लागि प्रोटोटाइप सिर्जना गर्दा, मैले निम्न कन्फिगरेसनमा VDS रोजें।

560 rubles / महिना लागत। कुपन प्रयोग गरेर 15% छुट सहित नोस्ट्रेस.

यो छनोट यस तथ्यको कारणले गर्दा हो कि Windows OS अन्तर्गतको नोड, हाम्रो प्राविधिक विशिष्टताहरूको सर्तहरूको पालना गर्न, अर्डरको लागि उपलब्ध अन्य OS हरूको तुलनामा कन्फिगर गर्न सजिलो छ।

अफटोपिक: खैर, अधिक सुरक्षाको लागि, यो भर्चुअल सर्भर नोडहरू मध्ये एकमा तोकिएको छ। सुरक्षित भर्चुअल नेटवर्क। र त्यहाँबाट मात्र RDP मार्फत पहुँच गर्न अनुमति दिइएको छ...

VDS सिर्जना गरेपछि र RDP मार्फत डेस्कटपमा पहुँच प्राप्त गरेपछि, तपाईंले गर्नु पर्ने पहिलो कुरा Rclone र Web-GUI को लागि वातावरण तयार गर्नु हो। ती। नयाँ पूर्वनिर्धारित ब्राउजर स्थापना गर्नुहोस्, उदाहरणका लागि क्रोम, किनकि सुरुमा स्थापित IE 11, दुर्भाग्यवश, प्रयोग गरिएको सफ्टवेयरसँग सधैं सही रूपमा काम गर्दैन। 

वातावरण तयार गरेपछि, सफ्टवेयर प्याकेजको साथ अभिलेख डाउनलोड गर्नुहोस् विन्डोजको लागि Rclone र यसलाई खोल्नुहोस्। 

अर्को, विन्डोज कमाण्ड लाइन मोडमा, निकालिएका फाइलहरूसँग फोल्डरमा जान आदेश कार्यान्वयन गर्नुहोस्। मेरो लागि यो प्रशासकको गृह फोल्डरमा अवस्थित छ:

C:UsersAdministrator>cd rclone

संक्रमण पछि, हामी Web-GUI बाट Rclone सुरु गर्न आदेश कार्यान्वयन गर्छौं:

C:UsersAdministratorrclone>rclone rcd --rc-web-gui --rc-user=”login” --rc-pass=”password” -L

जहाँ "लगइन" र "पासवर्ड" तपाईले निर्दिष्ट गर्नुभएको लगइन र पासवर्ड हो, अवश्य पनि, उद्धरण बिना।

आदेशको कार्यान्वयनमा, टर्मिनल प्रदर्शन गर्दछ

2020/05/17 22:34:10 NOTICE: Web GUI exists. Update skipped.
2020/05/17 22:34:10 NOTICE: Serving Web GUI
2020/05/17 22:34:10 NOTICE: Serving remote control on http://127.0.0.1:5572/

र Rclone ग्राफिकल वेब इन्टरफेस ब्राउजरमा स्वतः खुल्छ।

Web-GUI अझै पनि परीक्षण संस्करण चरणमा छ र कमाण्ड लाइन इन्टरफेसमा भएका सबै Rclone व्यवस्थापन क्षमताहरू छैनन् भन्ने तथ्यको बावजुद, यसको क्षमताहरू डाटा माइग्रेसनको लागि पर्याप्त छन्। र अलि बढी पनि।

समायोजन

अर्को चरण भनेको साइटहरूमा जडानहरू सेट अप गर्नु हो जहाँ डाटा छ वा अवस्थित हुनेछ। र लाइनमा पहिलो मुख्य डाटा रिसीभर हुनेछ - Nextcloud।

1. यो गर्न, खण्डमा जानुहोस् कन्फिगहरू Web-GUI। 

2. नयाँ कन्फिगरेसन - बटनको सिर्जना सुरु गर्दै नयाँ कन्फिगरेसन.

3. साइट नाम - क्षेत्र सेट गर्नुहोस् यस ड्राइभको नाम (तपाईंको सन्दर्भको लागि): अर्को बादल।

4. भण्डारणको प्रकार वा प्रकार चयन गर्दै चयन गर्नुहोस्: Nextcloud र Owncloud को लागि, मुख्य डाटा एक्सचेन्ज इन्टरफेस WebDAV हो।

5. अर्को, क्लिक गर्नुहोस् चरण १: सेटअप ड्राइभ गर्नुहोस्, जडान प्यारामिटरहरूको सूची खोल्नुहोस् र भर्नुहोस्। 

- 5.1। URL मा जडान गर्न HTTP होस्टको URL — WebDAV इन्टरफेसको हाइपरटेक्स्ट लिङ्क। नेक्स्टक्लाउडमा तिनीहरू सेटिङहरूमा अवस्थित छन् - इन्टरफेसको तल्लो बायाँ कुनामा।
- 5.2। तपाईंले प्रयोग गरिरहनु भएको Webdav साइट/सेवा/सफ्टवेयरको नाम - WebDAV इन्टरफेस नाम। क्षेत्र आफैंको लागि वैकल्पिक हो, यदि त्यहाँ धेरै जडानहरू छन् भने भ्रममा नपरोस्।
- 5.3 प्रयोगकर्ता नाम - प्राधिकरणको लागि प्रयोगकर्ता नाम
- 5.4। पासवर्ड - प्राधिकरणको लागि पासवर्ड
- 5.5। प्रयोगकर्ता/पासको सट्टा बेयरर टोकन (जस्तै म्याकरुन) र वाहक टोकन प्राप्त गर्न चलाउन आदेश उन्नत विकल्पहरूमा अतिरिक्त प्यारामिटरहरू र प्राधिकरण आदेशहरू छन्। तिनीहरू मेरो नेक्स्टक्लाउडमा प्रयोग गरिएका छैनन्।

6. अर्को क्लिक गर्नुहोस् कन्फिगरेसन सिर्जना गर्नुहोस् र कन्फिगरेसन सिर्जना गरिएको छ भनेर सुनिश्चित गर्न, खण्डमा जानुहोस् कन्फिग वेब इन्टरफेस... एउटै पृष्ठ मार्फत, नयाँ सिर्जना गरिएको कन्फिगरेसन मेटाउन वा सम्पादन गर्न सकिन्छ।

साइटमा जडानको कार्यक्षमता जाँच गर्न, खण्डमा जानुहोस् अन्वेषक। В поле रिमोटहरू कन्फिगर गरिएको साइटको नाम प्रविष्ट गर्नुहोस् र क्लिक गर्नुहोस् खुला। यदि तपाइँ फाइलहरू र डाइरेक्टरीहरूको सूची देख्नुहुन्छ भने, साइटको जडानले काम गरिरहेको छ।

थप विश्वस्त हुनको लागि, तपाइँ वेब इन्टरफेस मार्फत फोल्डर सिर्जना / मेटाउन वा डाउनलोड / मेटाउन सक्नुहुन्छ।

जडान हुन दोस्रो प्लेटफर्म Yandex डिस्क हुनेछ।

• पहिलो चार चरणहरू नेक्स्टक्लाउड जडान प्रक्रिया जस्तै छन्।
• अर्को, हामी सबै चीजहरू जस्तै छोड्छौं, त्यो हो, क्षेत्रहरू भित्र चरण 2: ड्राइव सेटअप गर्नुहोस् हामी तिनीहरूलाई खाली छोड्छौं र उन्नत विकल्पहरूमा केही परिवर्तन गर्दैनौं।
• हामी थिच्छौं कन्फिगरेसन सिर्जना गर्नुहोस्.
• Yandex प्राधिकरण पृष्ठ ब्राउजरमा खुल्छ, जस पछि तपाईंले सफल जडान र Rclone मा फर्कने प्रस्तावको बारेमा सन्देश प्राप्त गर्नुहुन्छ।
• हामी के गर्छौं खण्ड जाँच छ कन्फिगर गर्नुहोस्.

माइग्रेसन

जब हामीसँग दुईवटा साइटहरू जडान हुन्छन्, हामी तिनीहरूको बीचमा डेटा माइग्रेट गर्न सक्छौं। प्रक्रिया आफैले नेक्स्टक्लाउडमा जडानको कार्यक्षमता जाँच गर्न समान छ, जुन हामीले पहिले नै गर्यौं।

• जाऊ त्यहाँ अन्वेषक.
• टेम्प्लेट छनोट गर्दै 2-साइड साइड.
• प्रत्येक मा रिमोटहरू आफ्नो साइट को नाम संकेत गर्नुहोस्।
• हामी थिच्छौं खुला.
• हामी ती प्रत्येकका लागि फाइल र फोल्डरहरूको डाइरेक्टरी देख्छौं।

माइग्रेसन प्रक्रिया सुरु गर्न, डेटा स्रोत डाइरेक्टरीमा रहेका फाइलहरूसँग चाहिने फोल्डर चयन गर्न र गन्तव्य डाइरेक्टरीमा माउसको साथ तान्नुहोस्।

बाँकी साइटहरू थप्न र तिनीहरू बीच डाटा माइग्रेट गर्ने संयन्त्र माथिको कार्यहरू जस्तै छ। यदि तपाईंले आफ्नो कामको क्रममा त्रुटिहरू सामना गर्नुभयो भने, तपाईंले तिनीहरूको बारेमा विवरणहरू टर्मिनलमा अध्ययन गर्न सक्नुहुन्छ जहाँ Rclone with Web-GUI चलिरहेको छ।

सामान्यतया, को लागी कागजात रेक्लोन वेबसाइट र इन्टरनेटमा व्यापक र उपलब्ध छ, र प्रयोगमा कुनै कठिनाइहरू ल्याउनु हुँदैन। यसको साथ, म तपाइँको पीसी लाई बाइपास गरेर, एक क्लाउडबाट अर्कोमा फाइलहरू कसरी स्थानान्तरण गर्ने भन्ने बारे पहिलो पोष्टलाई विचार गर्छु।

PS यदि तपाईं अन्तिम कथनसँग सहमत हुनुहुन्न भने, टिप्पणीहरूमा लेख्नुहोस्: कुन "विषय कभर गरिएको छैन" र कुन नसामा यो जारी राख्न लायक छ।

स्रोत: www.habr.com