sophiagworld দ্বারা হারিয়ে

এই নিবন্ধে কিছু সাধারণ নিদর্শন রয়েছে যা প্রকৌশলীদের বৃহৎ মাপের পরিষেবাগুলির সাথে কাজ করতে সহায়তা করে যা লক্ষ লক্ষ ব্যবহারকারী দ্বারা অ্যাক্সেস করা হয়। 

লেখকের অভিজ্ঞতায়, এটি একটি সম্পূর্ণ তালিকা নয়, তবে প্রকৃতপক্ষে কার্যকর উপদেশ তো, শুরু করা যাক।

সমর্থন সহ অনুবাদিত Mail.ru ক্লাউড সলিউশন.

প্রথম ধাপ

নীচে তালিকাভুক্ত ব্যবস্থাগুলি বাস্তবায়নের জন্য তুলনামূলকভাবে সহজ কিন্তু উচ্চ প্রভাব রয়েছে৷ আপনি আগে তাদের চেষ্টা না করে থাকলে, আপনি উল্লেখযোগ্য উন্নতি বিস্মিত হবে.

কোড হিসাবে পরিকাঠামো

পরামর্শের প্রথম অংশটি কোড হিসাবে অবকাঠামো বাস্তবায়ন করা। এর মানে হল যে সম্পূর্ণ অবকাঠামো স্থাপন করার জন্য আপনার অবশ্যই একটি প্রোগ্রামেটিক উপায় থাকতে হবে। এটি জটিল শোনাচ্ছে, কিন্তু আমরা আসলে নিম্নলিখিত কোড সম্পর্কে কথা বলছি:

100টি ভার্চুয়াল মেশিন স্থাপন

• উবুন্টুর সাথে
• 2 জিবি র‍্যাম প্রতিটি
• তাদের নিম্নলিখিত কোড থাকবে
• এই পরামিতিগুলির সাথে

আপনি আপনার পরিকাঠামোর পরিবর্তনগুলি ট্র্যাক করতে পারেন এবং সংস্করণ নিয়ন্ত্রণ ব্যবহার করে দ্রুত সেগুলিতে ফিরে যেতে পারেন৷

আমার মধ্যে আধুনিকতাবাদী বলেছেন যে আপনি উপরের সমস্তটি করতে কুবারনেটস/ডকার ব্যবহার করতে পারেন এবং তিনি ঠিক বলেছেন।

এছাড়াও, আপনি শেফ, পাপেট বা টেরাফর্ম ব্যবহার করে অটোমেশন প্রদান করতে পারেন।

ক্রমাগত ইন্টিগ্রেশন এবং ডেলিভারি

একটি পরিমাপযোগ্য পরিষেবা তৈরি করতে, প্রতিটি পুল অনুরোধের জন্য একটি বিল্ড এবং পরীক্ষা পাইপলাইন থাকা গুরুত্বপূর্ণ৷ এমনকি যদি পরীক্ষাটি খুব সহজ হয়, তবে এটি অন্তত নিশ্চিত করবে যে আপনি যে কোডটি স্থাপন করবেন তা কম্পাইল করে।

প্রতিবার এই পর্যায়ে আপনি প্রশ্নের উত্তর দেন: আমার সমাবেশ কম্পাইল এবং পরীক্ষা পাস করবে, এটা বৈধ? এটি একটি কম বারের মত মনে হতে পারে, কিন্তু এটি অনেক সমস্যার সমাধান করে।

এই টিকটিকি দেখার চেয়ে সুন্দর আর কিছু নেই

এই প্রযুক্তির জন্য আপনি Github, CircleCI বা Jenkins মূল্যায়ন করতে পারেন।

লোড ব্যালেন্সার

সুতরাং, আমরা ট্র্যাফিক পুনঃনির্দেশিত করতে এবং সমস্ত নোডগুলিতে সমান লোড নিশ্চিত করতে একটি লোড ব্যালেন্সার চালাতে চাই বা ব্যর্থতার ক্ষেত্রে পরিষেবাটি চালু রাখতে চাই:

একটি লোড ব্যালেন্সার সাধারণত ট্র্যাফিক বিতরণের একটি ভাল কাজ করে। সর্বোত্তম অনুশীলন হল অতিরিক্ত ভারসাম্য বজায় রাখা যাতে আপনার ব্যর্থতার এক বিন্দুও না থাকে।

সাধারণত, লোড ব্যালেন্সারগুলি আপনার ব্যবহার করা ক্লাউডে কনফিগার করা হয়।

অনুরোধের জন্য RayID, পারস্পরিক সম্পর্ক আইডি বা UUID

আপনি কি কখনও এই মত একটি বার্তা সহ একটি অ্যাপ্লিকেশন ত্রুটি সম্মুখীন হয়েছে: "কিছু ভুল হয়েছে. এই আইডিটি সংরক্ষণ করুন এবং এটি আমাদের সহায়তা দলে পাঠান"?

একটি অনন্য শনাক্তকারী, পারস্পরিক সম্পর্ক আইডি, RayID, বা যে কোনও বৈচিত্র হল একটি অনন্য শনাক্তকারী যা আপনাকে তার জীবনচক্র জুড়ে একটি অনুরোধ ট্র্যাক করতে দেয়৷ এটি আপনাকে লগগুলিতে সম্পূর্ণ অনুরোধের পথ ট্র্যাক করতে দেয়৷

ব্যবহারকারী সিস্টেম A এর কাছে একটি অনুরোধ করে, তারপর A পরিচিতি B, যা C এর সাথে যোগাযোগ করে, এটি X এ সঞ্চয় করে এবং তারপর অনুরোধটি A-তে ফেরত দেওয়া হয়

আপনি যদি দূরবর্তীভাবে ভার্চুয়াল মেশিনের সাথে সংযোগ স্থাপন করেন এবং অনুরোধের পথটি ট্রেস করার চেষ্টা করেন (এবং ম্যানুয়ালি কোন কলগুলি করা হচ্ছে তা সম্পর্কযুক্ত করতে পারেন), আপনি পাগল হয়ে যাবেন। একটি অনন্য শনাক্তকারী থাকা জীবনকে অনেক সহজ করে তোলে। এটি আপনার পরিষেবা বৃদ্ধির সাথে সাথে সময় বাঁচাতে আপনি করতে পারেন এমন একটি সহজ জিনিস।

গড় স্তর

এখানে পরামর্শটি পূর্ববর্তীগুলির তুলনায় আরও জটিল, তবে সঠিক সরঞ্জামগুলি কাজটিকে সহজ করে তোলে, এমনকি ছোট এবং মাঝারি আকারের কোম্পানিগুলির জন্যও বিনিয়োগে একটি রিটার্ন প্রদান করে৷

কেন্দ্রীভূত লগিং

অভিনন্দন! আপনি 100টি ভার্চুয়াল মেশিন স্থাপন করেছেন। পরের দিন, সিইও আসেন এবং পরিষেবাটি পরীক্ষা করার সময় তিনি একটি ত্রুটির বিষয়ে অভিযোগ করেন। এটি সংশ্লিষ্ট আইডিটির প্রতিবেদন করে যা আমরা উপরে বলেছি, তবে আপনাকে 100টি মেশিনের লগগুলি দেখতে হবে যেটি ক্র্যাশের কারণটি খুঁজে বের করতে হবে৷ এবং আগামীকালের উপস্থাপনার আগে এটি খুঁজে পাওয়া দরকার।

যদিও এটি একটি মজার দুঃসাহসিক কাজ বলে মনে হচ্ছে, তবে এটি নিশ্চিত করা সর্বোত্তম যে আপনার কাছে এক জায়গায় সমস্ত পত্রিকা অনুসন্ধান করার ক্ষমতা রয়েছে৷ আমি ELK স্ট্যাকের অন্তর্নির্মিত কার্যকারিতা ব্যবহার করে লগ কেন্দ্রীয়করণের সমস্যা সমাধান করেছি: এটি অনুসন্ধানযোগ্য লগ সংগ্রহকে সমর্থন করে। এটি সত্যিই একটি নির্দিষ্ট জার্নাল খোঁজার সমস্যা সমাধানে সাহায্য করবে। একটি বোনাস হিসাবে, আপনি চার্ট এবং এই মত অন্যান্য মজার জিনিস তৈরি করতে পারেন.

ELK স্ট্যাক কার্যকারিতা

মনিটরিং এজেন্ট

এখন আপনার পরিষেবা চালু এবং চলছে, আপনাকে নিশ্চিত করতে হবে যে এটি মসৃণভাবে চলছে। এটি করার সেরা উপায় হল বেশ কয়েকটি চালানো এজেন্ট, যা সমান্তরালভাবে কাজ করে এবং পরীক্ষা করে যে এটি কাজ করে এবং মৌলিক ক্রিয়াকলাপগুলি সঞ্চালিত হয়।

এই সময়ে আপনি যে চেক চলমান বিল্ড ভাল বোধ এবং সূক্ষ্ম কাজ করে.

ছোট থেকে মাঝারি আকারের প্রকল্পগুলির জন্য, আমি API গুলি পর্যবেক্ষণ এবং নথিভুক্ত করার জন্য পোস্টম্যানকে সুপারিশ করি৷ কিন্তু সাধারণভাবে, আপনি শুধু নিশ্চিত করতে চান যে কখন কোন বিভ্রাট হয়েছে তা জানার জন্য আপনার কাছে একটি উপায় আছে এবং সময়মত অবহিত করা হবে।

লোডের উপর নির্ভর করে অটোস্কেলিং

এটা খুবই সাধারণ. আপনার যদি একটি VM পরিষেবার অনুরোধ থাকে এবং এটি 80% মেমরি ব্যবহারের কাছাকাছি চলে আসে, আপনি হয় এর সংস্থান বাড়াতে পারেন বা ক্লাস্টারে আরও VM যোগ করতে পারেন। লোডের অধীনে স্থিতিস্থাপক শক্তি পরিবর্তনের জন্য এই অপারেশনগুলির স্বয়ংক্রিয় সম্পাদন চমৎকার। কিন্তু আপনি কত টাকা খরচ করেন এবং যুক্তিসঙ্গত সীমা নির্ধারণ করেন সে বিষয়ে আপনার সবসময় সতর্ক থাকা উচিত।

বেশিরভাগ ক্লাউড পরিষেবাগুলির সাথে, আপনি এটিকে আরও সার্ভার বা আরও শক্তিশালী সার্ভার ব্যবহার করে অটোস্কেলে কনফিগার করতে পারেন।

পরীক্ষা পদ্ধতি

নিরাপদে আপডেটগুলি রোল আউট করার একটি ভাল উপায় হল এক ঘন্টার জন্য 1% ব্যবহারকারীর জন্য কিছু পরীক্ষা করতে সক্ষম হওয়া। আপনি, অবশ্যই, কর্মে এই ধরনের প্রক্রিয়া দেখেছেন. উদাহরণস্বরূপ, Facebook দর্শকদের অংশগুলিকে একটি ভিন্ন রঙ দেখায় বা ব্যবহারকারীরা কীভাবে পরিবর্তনগুলি বুঝতে পারে তা দেখতে ফন্টের আকার পরিবর্তন করে৷ একে A/B টেস্টিং বলা হয়।

এমনকি একটি নতুন বৈশিষ্ট্য প্রকাশ করা একটি পরীক্ষা হিসাবে শুরু করা যেতে পারে এবং তারপরে এটি কীভাবে প্রকাশ করা যায় তা নির্ধারণ করা যেতে পারে। এছাড়াও আপনি "মনে রাখার" বা আপনার পরিষেবায় অবনতি ঘটাচ্ছে এমন ফাংশনের উপর ভিত্তি করে ফ্লাইতে কনফিগারেশন পরিবর্তন করার ক্ষমতা পান।

উন্নত স্তর

এখানে টিপস রয়েছে যা বাস্তবায়ন করা বেশ কঠিন। আপনার সম্ভবত একটু বেশি সম্পদের প্রয়োজন হবে, তাই একটি ছোট বা মাঝারি আকারের কোম্পানির এটি পরিচালনা করা কঠিন হবে।

নীল-সবুজ স্থাপনা

এটিকে আমি "এরলাং" উদ্ঘাটনের উপায় বলি। টেলিফোন কোম্পানির আবির্ভাব হলে এরলাং ব্যাপকভাবে ব্যবহৃত হয়। টেলিফোন কল রুট করার জন্য সফটসুইচ ব্যবহার করা শুরু হয়। এই সুইচগুলিতে সফ্টওয়্যারটির মূল উদ্দেশ্য ছিল সিস্টেম আপগ্রেডের সময় কল ড্রপ না করা। আগেরটি ক্রাশ না করেই একটি নতুন মডিউল লোড করার একটি চমৎকার উপায় Erlang এর রয়েছে।

এই পদক্ষেপটি লোড ব্যালেন্সারের উপস্থিতির উপর নির্ভর করে। আসুন কল্পনা করুন আপনার সফ্টওয়্যারের সংস্করণ N আছে, এবং তারপর আপনি সংস্করণ N+1 স্থাপন করতে চান। 

Вы আমরা পারতাম শুধুমাত্র পরিষেবাটি বন্ধ করুন এবং পরবর্তী সংস্করণটি চালু করুন যা আপনার ব্যবহারকারীদের জন্য কাজ করে এবং কিছু ডাউনটাইম পান৷ কিন্তু ধরুন আপনার আছে সত্যিই কঠোর SLA শর্ত। সুতরাং, SLA 99,99% মানে আপনি অফলাইনে যেতে পারেন শুধুমাত্র প্রতি বছর 52 মিনিট দ্বারা।

আপনি যদি সত্যিই এই জাতীয় সূচকগুলি অর্জন করতে চান তবে আপনার একই সময়ে দুটি স্থাপনা প্রয়োজন: 

• একটি যে এখন ডান (N);
• পরবর্তী সংস্করণ (N+1)। 

আপনি লোড ব্যালেন্সারকে বলবেন যে ট্র্যাফিকের শতাংশকে নতুন সংস্করণে (N+1) পুনঃনির্দেশ করতে যখন আপনি সক্রিয়ভাবে রিগ্রেশনের জন্য নিরীক্ষণ করবেন।

এখানে আমাদের একটি সবুজ এন স্থাপনা রয়েছে যা সূক্ষ্ম কাজ করে। আমরা এই স্থাপনার পরবর্তী সংস্করণে যাওয়ার চেষ্টা করছি৷

আমাদের N+1 স্থাপনা অল্প ট্রাফিকের সাথে কাজ করে কিনা তা দেখার জন্য প্রথমে আমরা একটি সত্যিই ছোট পরীক্ষা পাঠাই:

অবশেষে, আমাদের কাছে স্বয়ংক্রিয় চেকের একটি সেট রয়েছে যা আমরা শেষ পর্যন্ত আমাদের স্থাপনা সম্পূর্ণ না হওয়া পর্যন্ত চালাই। আপনি যদি অনেক অনেক সতর্কতা অবলম্বন করুন, খারাপ রিগ্রেশনের ক্ষেত্রে দ্রুত রোলব্যাকের জন্য আপনি চিরতরে আপনার N স্থাপনা সংরক্ষণ করতে পারেন:

আপনি যদি আরও উন্নত স্তরে যেতে চান তবে নীল-সবুজ স্থাপনার সবকিছু স্বয়ংক্রিয়ভাবে চলতে দিন।

অসঙ্গতি সনাক্তকরণ এবং স্বয়ংক্রিয় প্রশমন

প্রদত্ত যে আপনার কাছে কেন্দ্রীভূত লগিং এবং ভাল লগ সংগ্রহ রয়েছে, আপনি ইতিমধ্যে উচ্চ লক্ষ্য নির্ধারণ করতে পারেন। উদাহরণস্বরূপ, সক্রিয়ভাবে ব্যর্থতার পূর্বাভাস দিন। ফাংশনগুলি মনিটরে এবং লগগুলিতে ট্র্যাক করা হয় এবং বিভিন্ন ডায়াগ্রাম তৈরি করা হয় - এবং আপনি আগে থেকেই ভবিষ্যদ্বাণী করতে পারেন কী ভুল হবে:

অসঙ্গতি সনাক্ত করা হলে, আপনি পরিষেবা প্রদান করে এমন কিছু ক্লু পরীক্ষা করতে শুরু করেন। উদাহরণস্বরূপ, CPU লোডের একটি স্পাইক নির্দেশ করতে পারে যে একটি হার্ড ড্রাইভ ব্যর্থ হচ্ছে, যখন অনুরোধের একটি স্পাইক নির্দেশ করতে পারে যে আপনাকে স্কেল করতে হবে। এই ধরনের পরিসংখ্যানগত ডেটা আপনাকে পরিষেবাটিকে সক্রিয় করতে দেয়।

এই অন্তর্দৃষ্টিগুলির সাহায্যে, আপনি যেকোনো মাত্রায় স্কেল করতে পারেন এবং সক্রিয়ভাবে এবং প্রতিক্রিয়াশীলভাবে মেশিন, ডাটাবেস, সংযোগ এবং অন্যান্য সংস্থানগুলির বৈশিষ্ট্য পরিবর্তন করতে পারেন।

এখানেই শেষ!

আপনি যদি ক্লাউড পরিষেবা বাড়ান তবে অগ্রাধিকারের এই তালিকাটি আপনাকে অনেক সমস্যা থেকে বাঁচাবে।

মূল নিবন্ধের লেখক পাঠকদের তাদের মন্তব্য ছেড়ে পরিবর্তন করতে আমন্ত্রণ জানিয়েছেন। নিবন্ধটি ওপেন সোর্স হিসেবে বিতরণ করা হয়, লেখকের অনুরোধ Github এ গ্রহণ করে.

বিষয়ে আর কি পড়তে হবে:

1. যান এবং CPU ক্যাশে
2. বাস্তবায়নের জন্য একটি টেমপ্লেট সহ জলদস্যুতার চেতনায় কুবারনেটস
3. টেলিগ্রামে আমাদের চ্যানেল আরাউন্ড কুবারনেটস

উত্স: www.habr.com