ছোটদের জন্য Minio

MinIO একটি চমৎকার সমাধান যখন আপনি সহজে এবং সহজভাবে অবজেক্ট স্টোরেজ সংগঠিত করতে চান। প্রাথমিক সেটআপ, অনেক প্ল্যাটফর্ম এবং ভাল পারফরম্যান্স জনপ্রিয় ভালবাসার ক্ষেত্রে তাদের কাজ করেছে। তাই এক মাস আগে সামঞ্জস্য ঘোষণা করা ছাড়া আমাদের আর কোনো উপায় ছিল না Veeam ব্যাকআপ এবং প্রতিলিপি এবং MinIO. অপরিবর্তনীয়তার মতো গুরুত্বপূর্ণ বৈশিষ্ট্য সহ। আসলে, MinIO একটি সম্পূর্ণ আছে অধ্যায় আমাদের ইন্টিগ্রেশনের জন্য নিবেদিত ডকুমেন্টেশনে।

অতএব, আজ আমরা কীভাবে তা নিয়ে কথা বলব:

• MinIO সেট আপ করা খুব দ্রুত।
• MinIO সেট আপ করা একটু কম দ্রুত, কিন্তু অনেক ভালো।
• Veeam SOBR স্কেলেবল রিপোজিটরির জন্য একটি সংরক্ষণাগার স্তর হিসাবে এটি ব্যবহার করুন।

তুমি কি কর?

যারা MinIO এর সম্মুখীন হননি তাদের জন্য একটি সংক্ষিপ্ত ভূমিকা। এটি Amazon S3 API এর সাথে সামঞ্জস্যপূর্ণ একটি ওপেন সোর্স অবজেক্ট স্টোরেজ। Apache v2 লাইসেন্সের অধীনে প্রকাশিত এবং স্পার্টান মিনিমালিজমের দর্শনকে মেনে চলে।

অর্থাৎ, এতে ড্যাশবোর্ড, গ্রাফ এবং অসংখ্য মেনু সহ একটি বিস্তৃত GUI নেই। MinIO শুধুমাত্র একটি কমান্ড দিয়ে তার সার্ভার চালু করে, যেখানে আপনি S3 API এর সম্পূর্ণ শক্তি ব্যবহার করে ডেটা সঞ্চয় করতে পারেন। কিন্তু এটি উল্লেখ করা উচিত যে এই সরলতা ব্যবহার করা সম্পদের ক্ষেত্রে প্রতারণামূলক হতে পারে। RAM এবং CPU নিখুঁতভাবে শোষিত হয়, তবে কারণগুলি নীচে আলোচনা করা হবে। এবং, যাইহোক, ফ্রিএনএএস এবং ট্রুএনএএসের মতো সমন্বয়গুলি হুডের নীচে MinIO ব্যবহার করে।

এই ভূমিকা এখানে শেষ হতে পারে.

MinIO সেট আপ করা খুব দ্রুত

এটি সেট আপ করা এত দ্রুত যে আমরা এটি উইন্ডোজ এবং লিনাক্সের জন্য দেখব। ডকার, এবং কুবারনেটিস এবং এমনকি ম্যাকওএসের জন্য বিকল্প রয়েছে তবে অর্থটি সর্বত্র একই হবে।

সুতরাং, উইন্ডোজের ক্ষেত্রে, অফিসিয়াল ওয়েবসাইটে যান https://min.io/download#/windows এবং সর্বশেষ সংস্করণ ডাউনলোড করুন। সেখানে আমরা শুরু করার জন্য নির্দেশাবলীও দেখি:

 minio.exe server F:Data

এবং একটি সামান্য আরো বিস্তারিত একটি লিঙ্ক আছে দ্রুত শুরু করার নির্দেশাবলী. নির্দেশাবলী বিশ্বাস না করার কোন মানে নেই, তাই আমরা এটি চালাই এবং এই উত্তরের মত কিছু পাই।

এখানেই শেষ! স্টোরেজ কাজ করছে এবং আপনি এটি দিয়ে কাজ শুরু করতে পারেন। যখন আমি বলেছিলাম যে MinIO ন্যূনতম এবং শুধু কাজ করে তখন আমি মজা করছিলাম না। আপনি যদি লঞ্চের সময় অফার করা লিঙ্কটি অনুসরণ করেন, তাহলে সেখানে উপলব্ধ সর্বাধিক ফাংশনগুলি হল একটি বালতি তৈরি করা৷ এবং আপনি ডেটা লেখা শুরু করতে পারেন।

লিনাক্স প্রেমীদের জন্য, সবকিছু কম সহজ নয়। সহজ নির্দেশাবলী:

wget https://dl.min.io/server/minio/release/linux-amd64/minio
chmod +x minio
./minio server /data

ফলাফলটি আগে যা দেখা হয়েছিল তার থেকে আলাদা করা যাবে না। 

MinIO সেট আপ করা একটু বেশি অর্থবহ

আমরা বুঝতে পারি, পূর্ববর্তী অনুচ্ছেদটি পরীক্ষার উদ্দেশ্যে প্যাম্পারিং। এবং, আসুন সত্য কথা বলি, আমরা পরীক্ষার জন্য MinIO খুব ব্যাপকভাবে ব্যবহার করি, যা স্বীকার করতে আমরা মোটেও লজ্জিত নই। অবশ্যই, এটি কাজ করে, তবে পরীক্ষার বেঞ্চের বাইরে এটি সহ্য করা লজ্জাজনক। অতএব, আমরা আমাদের হাতে একটি ফাইল নিয়ে এটি মনে আনতে শুরু করি।

HTTPS দ্বারা

উৎপাদনের পথে প্রথম বাধ্যতামূলক পদক্ষেপ হল এনক্রিপশন। MiniIO-তে শংসাপত্র যোগ করার জন্য ইতিমধ্যে নেটওয়ার্কে এক মিলিয়ন এবং এক হাজার ম্যানুয়াল রয়েছে, তবে তাদের সাধারণ পরিকল্পনা হল:

• একটি শংসাপত্র তৈরি করুন
• উইন্ডোজের ক্ষেত্রে এটিকে C:Users%User%.miniocerts-এ রাখুন
• ${HOME}/.minio/certs-এ Linux-এর জন্য 
• সার্ভার রিস্টার্ট করা হচ্ছে

ব্যানাল লেটস এনক্রিপ্ট বিরক্তিকর এবং সর্বত্র বর্ণনা করা হয়েছে, তাই আমাদের পথটি সামুরাইয়ের পথ, তাই উইন্ডোজের ক্ষেত্রে আমরা ডাউনলোড করি Cygwin, এবং লিনাক্সের ক্ষেত্রে আমরা সহজভাবে পরীক্ষা করি যে আমরা openssl ইনস্টল করেছি। এবং আমরা একটু কনসোল জাদু করি:

• কী তৈরি করুন: openssl ecparam -genkey -name prime256v1 | openssl ec -out private.key
• আমরা কী ব্যবহার করে একটি শংসাপত্র তৈরি করি: openssl req -new -x509 -days 3650 -key private.key -out public.crt
• উপরে উল্লিখিত ফোল্ডারে private.key এবং public.crt কপি করুন
• MinIO পুনরায় চালু করুন

যদি সবকিছু যেমন উচিত তেমন চলে, তবে স্ট্যাটাসে এরকম কিছু প্রদর্শিত হবে।

MinIO ইরেজার কোডিং সক্ষম করুন

প্রথমত, বিষয় সম্পর্কে কয়েকটি শব্দ। সংক্ষেপে: এটি ক্ষতি এবং ক্ষতি থেকে ডেটার সফ্টওয়্যার সুরক্ষা। একটি অভিযানের মত, শুধুমাত্র অনেক বেশি নির্ভরযোগ্য। যদি ক্লাসিক RAID6 দুটি ডিস্ক হারাতে পারে, তাহলে MinIO সহজেই অর্ধেক হারানোর সাথে মানিয়ে নিতে পারে। প্রযুক্তিটি আরও বিশদে বর্ণনা করা হয়েছে অফিসিয়াল গাইড. কিন্তু যদি আমরা সারমর্ম গ্রহণ করি, তাহলে এটি রিড-সলোমন কোডগুলির একটি বাস্তবায়ন: সমস্ত তথ্য ডেটা ব্লকের আকারে সংরক্ষণ করা হয়, যার সমতা ব্লক রয়েছে। এবং মনে হচ্ছে এই সব ইতিমধ্যে অনেকবার করা হয়েছে, কিন্তু একটি গুরুত্বপূর্ণ "কিন্তু" আছে: আমরা সঞ্চিত বস্তুর জন্য ডেটা ব্লকের সাথে প্যারিটি ব্লকের অনুপাত স্পষ্টভাবে নির্দেশ করতে পারি।
আপনি কি 1:1 চান? অনুগ্রহ!
আপনি কি 5:2 চান? সমস্যা নেই!

একটি অত্যন্ত গুরুত্বপূর্ণ বৈশিষ্ট্য যদি আপনি একবারে একাধিক নোড ব্যবহার করেন এবং সর্বাধিক ডেটা সুরক্ষা এবং ব্যয়িত সংস্থানগুলির মধ্যে আপনার নিজস্ব ভারসাম্য খুঁজে পেতে চান। বাক্সের বাইরে, MinIO N/2 সূত্র ব্যবহার করে (যেখানে N হল মোট ডিস্কের সংখ্যা), যেমন আপনার ডেটা N/2 ডেটা ডিস্ক এবং N/2 প্যারিটি ডিস্কের মধ্যে বিভক্ত করে। মানব পদে অনুবাদ: আপনি অর্ধেক ডিস্ক হারাতে পারেন এবং ডেটা পুনরুদ্ধার করতে পারেন। এই সম্পর্ক মাধ্যমে দেওয়া হয় সংগ্রহস্থল ক্লাস, আপনাকে নিজের জন্য বেছে নেওয়ার অনুমতি দেয় যা আরও গুরুত্বপূর্ণ: নির্ভরযোগ্যতা বা ক্ষমতা।

গাইড নিম্নলিখিত উদাহরণ দেয়: ধরুন আপনার 16 টি ডিস্কে একটি ইনস্টলেশন আছে এবং আপনাকে 100 এমবি আকারের একটি ফাইল সংরক্ষণ করতে হবে। যদি ডিফল্ট সেটিংস ব্যবহার করা হয় (ডেটার জন্য 8 ডিস্ক, প্যারিটি ব্লকের জন্য 8), তাহলে ফাইলটি অবশেষে প্রায় দ্বিগুণ ভলিউম গ্রহণ করবে, যেমন 200 এমবি। যদি ডিস্কের অনুপাত 10/6 হয়, তাহলে 160 MB প্রয়োজন হবে। 14/2 - 114 MB

অভিযান থেকে আরেকটি গুরুত্বপূর্ণ পার্থক্য: ডিস্ক ব্যর্থতার ক্ষেত্রে, MinIO অবজেক্ট লেভেলে কাজ করবে, পুরো সিস্টেমটি বন্ধ না করে একের পর এক পুনরুদ্ধার করবে। একটি নিয়মিত অভিযানের সময় পুরো ভলিউম পুনরুদ্ধার করতে বাধ্য করা হবে, যা একটি অনির্দেশ্য পরিমাণ সময় নেবে। লেখক একটি ডিস্ক শেলফ মনে রেখেছেন যেটি দুটি ডিস্ক পড়ে যাওয়ার পরে, পুনরায় গণনা করতে দেড় সপ্তাহ লেগেছিল। এটা বেশ অপ্রীতিকর ছিল.

এবং, একটি গুরুত্বপূর্ণ দ্রষ্টব্য: MinIO ইরেজার কোডিংয়ের জন্য সমস্ত ডিস্ককে 4 থেকে 16 ডিস্কের সেটে ভাগ করে, সর্বাধিক সম্ভাব্য সেট আকার ব্যবহার করে। এবং ভবিষ্যতে, তথ্যের একটি উপাদান শুধুমাত্র একটি সেটের মধ্যে সংরক্ষণ করা হবে।

এই সব খুব সুন্দর শোনাচ্ছে, কিন্তু সেট আপ করা কতটা কঠিন হবে? চলুন দেখে নেওয়া যাক। আমরা চালানোর জন্য কমান্ড নিই এবং সহজভাবে যে ডিস্কগুলিতে স্টোরেজ তৈরি করা দরকার তার তালিকা করি। যদি সবকিছু সঠিকভাবে করা হয়, তাহলে রিপোর্টে আমরা জড়িত ডিস্কের সংখ্যা দেখতে পাব। এবং পরামর্শ হল যে একবারে একটি হোস্টে অর্ধেক ডিস্ক যুক্ত করা ভাল নয়, কারণ এটি ডেটা ক্ষতির দিকে পরিচালিত করবে।

c:minio>minio.exe server F: G: H: I: J: K:

এর পরে, MinIO সার্ভার পরিচালনা এবং কনফিগার করতে, আমাদের একটি এজেন্টের প্রয়োজন হবে, যা আপনি ডাউনলোড করতে পারেন সেখানে অফিসিয়াল সাইট থেকে।

প্রতিবার ঠিকানা এবং অ্যাক্সেস কী টাইপ করার সময় আপনার আঙ্গুলগুলি পরিধান না করার জন্য (এবং এটি নিরাপদ নয়), আপনি যখন প্রথম সূত্র mc alias সেটটি ব্যবহার করা শুরু করেন তখন অবিলম্বে একটি উপনাম তৈরি করা সুবিধাজনক। [আপনার-অ্যাক্সেস-কী] [আপনার-গোপন-কী]

mc alias set veeamS3 https://172.17.32.52:9000 YOURS3ACCESSKEY YOURSECERTKE

অথবা আপনি অবিলম্বে আপনার হোস্ট যোগ করতে পারেন:

mc config host add minio-veeam https://minio.jorgedelacruz.es YOURS3ACCESSKEY YOURSECERTKEY

এবং তারপরে আমরা একটি সুন্দর দল নিয়ে একটি অপরিবর্তনীয় বালতি তৈরি করব

mc mb --debug -l veeamS3/immutable 

mc: <DEBUG> PUT /immutable/ HTTP/1.1
Host: 172.17.32.52:9000
User-Agent: MinIO (windows; amd64) minio-go/v7.0.5 mc/2020-08-08T02:33:58Z
Content-Length: 0
Authorization: AWS4-HMAC-SHA256 Credential=minioadmin/20200819/us-east-1/s3/aws4_request, SignedHeaders=host;x-amz-bucket-object-lock-enabled;x-amz-content-sha256;x-amz-date, Signature=**REDACTED**
X-Amz-Bucket-Object-Lock-Enabled: true
X-Amz-Content-Sha256: UNSIGNED-PAYLOAD
X-Amz-Date: 20200819T092241Z
Accept-Encoding: gzip
mc: <DEBUG> HTTP/1.1 200 OK
Content-Length: 0
Accept-Ranges: bytes
Content-Security-Policy: block-all-mixed-content
Date: Wed, 19 Aug 2020 09:22:42 GMT
Location: /immutable
Server: MinIO/RELEASE.2020-08-16T18-39-38Z
Vary: Origin
X-Amz-Request-Id: 162CA0F9A3A3AEA0
X-Xss-Protection: 1; mode=block
mc: <DEBUG> Response Time:  253.0017ms

--ডিবাগ আপনাকে শুধুমাত্র চূড়ান্ত বার্তা নয়, আরও বিস্তারিত তথ্য দেখতে দেয়। 

-l মানে —with-lock, যার মানে অপরিবর্তনীয়

যদি আমরা এখন ওয়েব ইন্টারফেসে ফিরে আসি, আমাদের নতুন বালতি সেখানে উপস্থিত হবে।

এখন এ পর্যন্তই. আমরা সুরক্ষিত সঞ্চয়স্থান তৈরি করেছি এবং Veeam-এর সাথে একীকরণে এগিয়ে যাওয়ার জন্য প্রস্তুত।

আপনি নিশ্চিত করতে পারেন যে সবকিছু নিখুঁতভাবে কাজ করছে:

c:minio>mc admin info veeamS3

●  172.17.32.52:9000
   Uptime: 32 minutes
   Version: 2020-08-16T18:39:38Z
   Network: 1/1 OK
   Drives: 6/6 OK
0 B Used, 1 Bucket, 0 Objects
6 drives online, 0 drives offline

MinIO এবং Veeam

সতর্কতা যদি কোনো অবিশ্বাস্য কারণে আপনি HTTP এর মাধ্যমে কাজ করতে চান, তাহলে HKEY_LOCAL_MACHINESOFTWAREVeeamVeeam ব্যাকআপ এবং প্রতিলিপিতে একটি DWORD কী তৈরি করুন SOBRArchiveS3DisableTLS. এর মান 1 এ সেট করুন এবং মনে রাখবেন যে আমরা এই ধরনের আচরণকে দৃঢ়ভাবে অনুমোদন করি না এবং কাউকে এটি সুপারিশ করি না।

আবার মনোযোগ! যদি, কিছু ভুল বোঝাবুঝির কারণে, আপনি Windows 2008 R2 ব্যবহার করা চালিয়ে যান, তাহলে আপনি যখন MinIO-কে Veeam-এর সাথে সংযোগ করার চেষ্টা করেন, আপনি সম্ভবত এইরকম একটি ত্রুটি পাবেন: Amazon S3 এন্ডপয়েন্টের সাথে সংযোগ স্থাপন করতে ব্যর্থ হয়েছে৷ এটি থেকে একটি অফিসিয়াল প্যাচ দিয়ে চিকিত্সা করা যেতে পারে মাইক্রোসফট.

ঠিক আছে, প্রস্তুতি সম্পূর্ণ হয়েছে, আসুন VBR ইন্টারফেসটি খুলুন এবং ব্যাকআপ ইনফ্রাস্ট্রাকচার ট্যাবে যান, যেখানে আমরা একটি নতুন সংগ্রহস্থল যোগ করার জন্য উইজার্ডকে কল করব।

অবশ্যই, আমরা অবজেক্ট স্টোরেজে আগ্রহী, যথা S3 সামঞ্জস্যপূর্ণ। যে উইজার্ডটি খোলে, সেখানে একটি নাম সেট করুন এবং ঠিকানা এবং অ্যাকাউন্ট নির্দেশ করে পদক্ষেপগুলি দিয়ে যান। যদি প্রয়োজন হয়, সেই গেটটি নির্দিষ্ট করতে ভুলবেন না যার মাধ্যমে স্টোরেজের অনুরোধগুলি প্রক্সি করা হবে৷

তারপরে বালতি, ফোল্ডারটি নির্বাচন করুন এবং সাম্প্রতিক ব্যাকআপগুলিকে অপরিবর্তনীয় করুন বাক্সটি টিক দিন৷ অথবা আমরা এটি ইনস্টল করি না। কিন্তু যেহেতু আমরা একটি স্টোরেজ সুবিধা তৈরি করেছি যা এই ফাংশনটিকে সমর্থন করে, তাই এটি ব্যবহার না করা পাপ হবে।

পরবর্তী > শেষ করুন এবং ফলাফল উপভোগ করুন।

এখন আমাদের এটিকে ক্যাপাসিটি টিয়ার হিসাবে SOBR সংগ্রহস্থলে যুক্ত করতে হবে। এটি করার জন্য, আমরা হয় একটি নতুন তৈরি করি বা বিদ্যমান একটি সম্পাদনা করি। আমরা ক্যাপাসিটি টিয়ার ধাপে আগ্রহী।

এখানে আমরা কোন পরিস্থিতিতে কাজ করব তা বেছে নিতে হবে। সমস্ত বিকল্প অন্য একটি বেশ ভাল বর্ণনা করা হয়েছে প্রবন্ধ, তাই আমি নিজেকে পুনরাবৃত্তি করব না

এবং উইজার্ডের সমাপ্তির পরে, ব্যাকআপগুলি অনুলিপি বা স্থানান্তর করার জন্য কাজগুলি স্বয়ংক্রিয়ভাবে চালু হবে৷ কিন্তু যদি আপনার পরিকল্পনায় অবিলম্বে সমস্ত সিস্টেমে লোড রাখা অন্তর্ভুক্ত না হয়, তাহলে উইন্ডো বোতামে কাজ করার জন্য গ্রহণযোগ্য ব্যবধান সেট করতে ভুলবেন না।

এবং, অবশ্যই, আপনি আলাদা ব্যাকআপ কপি কাজ করতে পারেন। কেউ কেউ বিশ্বাস করেন যে এটি আরও বেশি সুবিধাজনক, কারণ সেগুলি ব্যবহারকারীর জন্য কিছুটা স্বচ্ছ এবং অনুমানযোগ্য যারা শুটিং রেঞ্জের অপারেশনের বিশদ বিবরণ জানতে চান না। এবং সেখানে যথেষ্ট বিশদ রয়েছে, তাই আবারও আমি উপরের লিঙ্কে সংশ্লিষ্ট নিবন্ধটি সুপারিশ করছি।

এবং অবশেষে, বিশ্বাসঘাতক প্রশ্নের উত্তর: আপনি যদি এখনও অপরিবর্তনীয় স্টোরেজ থেকে ব্যাকআপ মুছে ফেলার চেষ্টা করেন তবে কী হবে?

এখানে উত্তর হল:

আজ যে জন্য সব. সত্যিকারের ঐতিহ্যে, এই বিষয়ে দরকারী বিষয়গুলির একটি তালিকা ধরুন:

• ম্যানুয়াল Veeam এর সাথে MinIO ব্যবহার করা
• ব্যবহারের উদাহরণ Office 365 এর জন্য Veeam ব্যাকআপ সহ MinIO.
• সাধারণ সেটআপ গাইড S3 শত ডলার Veeam.
• আমাদের উপর শাখা ফোরাম S3 স্টোরেজ সম্পর্কে।

উত্স: www.habr.com