কেন আমরা এন্টারপ্রাইজ সার্ভিস মেশ তৈরি করছি?

সার্ভিস মেশ মাইক্রোসার্ভিস একীভূত করার এবং ক্লাউড অবকাঠামোতে স্থানান্তরের জন্য একটি সুপরিচিত স্থাপত্য প্যাটার্ন। আজ ক্লাউড-কন্টেইনার জগতে এটি ছাড়া করা বেশ কঠিন। বেশ কয়েকটি ওপেন-সোর্স পরিষেবা জাল বাস্তবায়ন ইতিমধ্যেই বাজারে উপলব্ধ, কিন্তু তাদের কার্যকারিতা, নির্ভরযোগ্যতা এবং নিরাপত্তা সর্বদা যথেষ্ট নয়, বিশেষ করে যখন এটি সারা দেশে বড় আর্থিক কোম্পানিগুলির প্রয়োজনীয়তার ক্ষেত্রে আসে। এই কারণেই Sbertech-এ আমরা পরিষেবা মেশ কাস্টমাইজ করার সিদ্ধান্ত নিয়েছি এবং পরিষেবা মেশ সম্পর্কে কী দুর্দান্ত, কী খুব ভাল নয় এবং আমরা এটি সম্পর্কে কী করতে যাচ্ছি সে সম্পর্কে কথা বলতে চাই।

ক্লাউড প্রযুক্তির জনপ্রিয়তার সাথে সার্ভিস মেশ প্যাটার্নের জনপ্রিয়তা বাড়ছে। এটি একটি ডেডিকেটেড অবকাঠামো স্তর যা বিভিন্ন নেটওয়ার্ক পরিষেবার মধ্যে মিথস্ক্রিয়াকে সহজ করে তোলে। আধুনিক ক্লাউড অ্যাপ্লিকেশনগুলি শত শত বা এমনকি হাজার হাজার পরিষেবা নিয়ে গঠিত, যার প্রতিটির হাজার হাজার কপি থাকতে পারে।

এই পরিষেবাগুলির মধ্যে মিথস্ক্রিয়া এবং পরিচালনা পরিষেবা মেশের একটি মূল কাজ৷ প্রকৃতপক্ষে, এটি অনেকগুলি প্রক্সির একটি নেটওয়ার্ক মডেল, কেন্দ্রীয়ভাবে পরিচালিত হয় এবং খুব দরকারী ফাংশনগুলির একটি সেট সম্পাদন করে৷

প্রক্সি স্তরে (ডেটা প্লেন):

• রাউটিং এবং ট্রাফিক ভারসাম্য নীতি বরাদ্দ করা এবং বিতরণ করা
• কী, সার্টিফিকেট, টোকেন বিতরণ
• টেলিমেট্রির সংগ্রহ, মনিটরিং মেট্রিক্স তৈরি করা
• নিরাপত্তা এবং পর্যবেক্ষণ পরিকাঠামো সঙ্গে একীকরণ

নিয়ন্ত্রণ সমতল স্তরে:

• রাউটিং এবং ট্রাফিক ভারসাম্য নীতি প্রয়োগ করা
• পুনঃপ্রচার এবং টাইমআউট পরিচালনা করা, "মৃত" নোড সনাক্ত করা (সার্কিট ব্রেকিং), ইনজেকশনের ত্রুটিগুলি পরিচালনা করা এবং অন্যান্য প্রক্রিয়ার মাধ্যমে পরিষেবার স্থিতিস্থাপকতা নিশ্চিত করা
• কল প্রমাণীকরণ/অনুমোদন
• ড্রপিং মেট্রিক্স (পর্যবেক্ষণযোগ্যতা)

এই প্রযুক্তির বিকাশে আগ্রহী ব্যবহারকারীদের পরিসর খুব বিস্তৃত - ছোট স্টার্টআপ থেকে বড় ইন্টারনেট কর্পোরেশন, উদাহরণস্বরূপ, পেপ্যাল।

কর্পোরেট সেক্টরে সার্ভিস মেশ কেন প্রয়োজন?

একটি সার্ভিস মেশ ব্যবহার করার অনেক সুস্পষ্ট সুবিধা রয়েছে। প্রথমত, এটি বিকাশকারীদের জন্য সহজভাবে সুবিধাজনক: কোড লেখার জন্য একটি প্রযুক্তি প্ল্যাটফর্ম প্রদর্শিত হবে, যা উল্লেখযোগ্যভাবে ক্লাউড অবকাঠামোতে একীকরণকে সহজ করে দেয় কারণ পরিবহন স্তরটি প্রয়োগের যুক্তি থেকে সম্পূর্ণ বিচ্ছিন্ন।

উপরন্তু, সার্ভিস মেশ সরবরাহকারী এবং ভোক্তাদের মধ্যে সম্পর্ককে সরল করে। আজ, API প্রদানকারী এবং ভোক্তাদের জন্য একটি বিশেষ ইন্টিগ্রেশন মধ্যস্থতাকারী এবং মধ্যস্থতাকারী - এন্টারপ্রাইজ সার্ভিস বাসকে জড়িত না করেই ইন্টারফেস এবং চুক্তিতে একমত হওয়া অনেক সহজ। এই পদ্ধতিটি উল্লেখযোগ্যভাবে দুটি সূচককে প্রভাবিত করে। বাজারে নতুন কার্যকারিতা আনার গতি (টাইম-টু-মার্কেট) বাড়ে, কিন্তু একই সময়ে সমাধানের খরচ বেড়ে যায়, যেহেতু ইন্টিগ্রেশন স্বাধীনভাবে করতে হয়। ব্যবসায়িক কার্যকারিতা বিকাশকারী দলগুলির দ্বারা পরিষেবা জালের ব্যবহার এখানে ভারসাম্য বজায় রাখতে সহায়তা করে। ফলস্বরূপ, API প্রদানকারীরা তাদের পরিষেবার অ্যাপ্লিকেশন উপাদানগুলির উপর একচেটিয়াভাবে ফোকাস করতে পারে এবং এটিকে পরিষেবা মেশে প্রকাশ করতে পারে - API অবিলম্বে সমস্ত ক্লায়েন্টের জন্য উপলব্ধ হয়ে যাবে, এবং ইন্টিগ্রেশনের গুণমান উত্পাদন প্রস্তুত হবে এবং একটি একক প্রয়োজন হবে না। অতিরিক্ত কোডের লাইন।

এর পরের সুবিধা হল ডেভেলপার, সার্ভিস মেশ ব্যবহার করে, শুধুমাত্র ব্যবসায়িক কার্যকারিতার উপর ফোকাস করে — এর পরিষেবার প্রযুক্তিগত উপাদানের পরিবর্তে পণ্যের উপর। উদাহরণস্বরূপ, আপনাকে আর এই সত্যটি নিয়ে ভাবতে হবে না যে এমন পরিস্থিতিতে যেখানে নেটওয়ার্কের মাধ্যমে একটি পরিষেবা কল করা হয়, কোথাও একটি সংযোগ ব্যর্থতা ঘটতে পারে। উপরন্তু, পরিষেবা মেশ একই পরিষেবার অনুলিপিগুলির মধ্যে ট্র্যাফিকের ভারসাম্য বজায় রাখতে সহায়তা করে: যদি একটি অনুলিপি "মৃত্যু" হয় তবে সিস্টেমটি সমস্ত ট্র্যাফিক অবশিষ্ট লাইভ কপিগুলিতে স্যুইচ করবে৷

সার্ভিস মেশ - এটি বিতরণ করা অ্যাপ্লিকেশন তৈরি করার জন্য একটি ভাল ভিত্তি, যা ক্লায়েন্টের কাছ থেকে অভ্যন্তরীণ এবং বাহ্যিকভাবে তার পরিষেবাগুলিতে কল প্রদানের বিবরণ লুকিয়ে রাখে। পরিষেবা মেশ ব্যবহার করে সমস্ত অ্যাপ্লিকেশন নেটওয়ার্ক এবং একে অপরের থেকে উভয় পরিবহন স্তরে বিচ্ছিন্ন: তাদের মধ্যে কোন যোগাযোগ নেই। এই ক্ষেত্রে, বিকাশকারী তার পরিষেবাগুলির উপর সম্পূর্ণ নিয়ন্ত্রণ পায়।

এটা উল্লেখ করা উচিত যে একটি পরিষেবা জাল পরিবেশে বিতরণ করা অ্যাপ্লিকেশন আপডেট করা সহজ হয়ে যায়। উদাহরণস্বরূপ, একটি নীল/সবুজ স্থাপনা, যেখানে দুটি অ্যাপ্লিকেশন পরিবেশ ইনস্টলেশনের জন্য উপলব্ধ, যার একটি আপডেট করা হয়নি এবং স্ট্যান্ডবাই মোডে রয়েছে। একটি অসফল রিলিজের ক্ষেত্রে পূর্ববর্তী সংস্করণে ফিরে যাওয়া একটি বিশেষ রাউটার দ্বারা সঞ্চালিত হয়, যার ভূমিকাটি পরিষেবা মেশ ভালভাবে মোকাবেলা করে. নতুন সংস্করণ পরীক্ষা করতে, আপনি ব্যবহার করতে পারেন ক্যানারি রিলিজ — নতুন সংস্করণে স্যুইচ করুন মাত্র 10% ট্রাফিক বা ক্লায়েন্টদের একটি পাইলট গ্রুপ থেকে অনুরোধ। প্রধান ট্র্যাফিক পুরানো সংস্করণে যায়, কিছুই ভাঙে না।

এছাড়াও সার্ভিস মেশ আমাদের রিয়েল-টাইম SLA কন্ট্রোল দেয়. বিতরণকৃত প্রক্সি সিস্টেম পরিষেবাটিকে ব্যর্থ হওয়ার অনুমতি দেবে না যখন কোনও ক্লায়েন্ট এটিকে নির্ধারিত কোটা অতিক্রম করে। যদি এপিআই থ্রুপুট সীমিত হয়, তবে কেউ এটিকে বৃহৎ সংখ্যক লেনদেন দিয়ে আবিষ্ট করতে সক্ষম হবে না: পরিষেবা মেশ পরিষেবার সামনে দাঁড়িয়ে আছে এবং অপ্রয়োজনীয় ট্র্যাফিকের অনুমতি দেয় না। এটি কেবল ইন্টিগ্রেশন লেয়ারে লড়াই করবে এবং পরিষেবাগুলি নিজেরাই এটি লক্ষ্য না করেই কাজ চালিয়ে যাবে।

যদি কোনো কোম্পানি ইন্টিগ্রেশন সলিউশনের বিকাশের জন্য খরচ কমাতে চায়, সার্ভিস মেশও সাহায্য করে: আপনি বাণিজ্যিক পণ্য থেকে এর ওপেন সোর্স সংস্করণে স্যুইচ করতে পারেন. আমাদের এন্টারপ্রাইজ সার্ভিস মেশ সার্ভিস মেশের ওপেন সোর্স সংস্করণের উপর ভিত্তি করে তৈরি।

আরেকটি সুবিধা - ইন্টিগ্রেশন পরিষেবাগুলির একটি একক পূর্ণাঙ্গ সেটের প্রাপ্যতা. যেহেতু সমস্ত ইন্টিগ্রেশন এই মিডলওয়্যারের মাধ্যমে তৈরি করা হয়েছে, আমরা সমস্ত ইন্টিগ্রেশন ট্র্যাফিক এবং কোম্পানির ব্যবসার মূল গঠনকারী অ্যাপ্লিকেশনগুলির মধ্যে সংযোগগুলি পরিচালনা করতে পারি। এটা খুবই আরামদায়ক।

এবং অবশেষে সার্ভিস মেশ একটি কোম্পানিকে গতিশীল পরিকাঠামোতে যেতে উৎসাহিত করে। এখন অনেকেই কন্টেইনারাইজেশনের দিকে তাকিয়ে আছে। মাইক্রোসার্ভিসে একটি মনোলিথ কাটা, এই সব সুন্দরভাবে বাস্তবায়ন - বিষয় ক্রমবর্ধমান হয়. কিন্তু যখন আপনি একটি নতুন প্ল্যাটফর্মে বহু বছর ধরে উৎপাদনে থাকা একটি সিস্টেমকে স্থানান্তর করার চেষ্টা করেন, তখন আপনি অবিলম্বে বেশ কয়েকটি সমস্যার সম্মুখীন হন: এটি সমস্ত পাত্রে ঠেলে দেওয়া এবং প্ল্যাটফর্মে স্থাপন করা সহজ নয়। এবং এই বিতরণ করা উপাদানগুলির বাস্তবায়ন, সিঙ্ক্রোনাইজেশন এবং মিথস্ক্রিয়া আরেকটি খুব জটিল বিষয়। কিভাবে তারা একে অপরের সাথে যোগাযোগ করবে? ক্যাসকেডিং ব্যর্থতা হবে? সার্ভিস মেশ আপনাকে এই সমস্যাগুলির কিছু সমাধান করতে এবং পুরানো আর্কিটেকচার থেকে নতুনটিতে স্থানান্তর করার সুবিধা দেয় কারণ আপনি নেটওয়ার্ক বিনিময় যুক্তির কথা ভুলে যেতে পারেন।

কেন আপনি পরিষেবা মেশ কাস্টমাইজেশন প্রয়োজন?

আমাদের কোম্পানিতে, শত শত সিস্টেম এবং মডিউল সহাবস্থান করে এবং রানটাইম খুব লোড হয়। সুতরাং একটি সিস্টেমের একটি সাধারণ প্যাটার্ন অন্যটিকে কল করা এবং একটি প্রতিক্রিয়া গ্রহণ করা যথেষ্ট নয়, কারণ উৎপাদনে আমরা আরও চাই। আপনি একটি এন্টারপ্রাইজ সেবা জাল থেকে আর কি প্রয়োজন?

ইভেন্ট প্রক্রিয়াকরণ পরিষেবা

আসুন কল্পনা করি যে আমাদের রিয়েল-টাইম ইভেন্ট প্রসেসিং করতে হবে - এমন একটি সিস্টেম যা রিয়েল টাইমে ক্লায়েন্টের ক্রিয়াগুলি বিশ্লেষণ করে এবং অবিলম্বে তাকে একটি প্রাসঙ্গিক অফার করতে পারে। অনুরূপ কার্যকারিতা বাস্তবায়ন করতে, ব্যবহার করুন ইভেন্ট-চালিত আর্কিটেকচার (EDA) নামে পরিচিত স্থাপত্য প্যাটার্ন. বর্তমান পরিষেবা মেশগুলির মধ্যে কোনওটিই এই জাতীয় নিদর্শনগুলিকে সমর্থন করে না, তবে এটি খুব গুরুত্বপূর্ণ, বিশেষত একটি ব্যাঙ্কের জন্য!

এটি বেশ অদ্ভুত যে রিমোট প্রসিডিউর কল (RPC) পরিষেবা মেশের সমস্ত সংস্করণ দ্বারা সমর্থিত, কিন্তু তারা EDA-এর সাথে বন্ধুত্বপূর্ণ নয়। কারণ সার্ভিস মেশ হল এক ধরনের আধুনিক ডিস্ট্রিবিউটেড ইন্টিগ্রেশন, এবং EDA হল একটি খুব প্রাসঙ্গিক আর্কিটেকচারাল প্যাটার্ন যা আপনাকে গ্রাহকের অভিজ্ঞতার পরিপ্রেক্ষিতে অনন্য জিনিসগুলি করতে দেয়।

আমাদের এন্টারপ্রাইজ সার্ভিস মেশ এই সমস্যার সমাধান করা উচিত। এছাড়াও, আমরা এটিতে বিভিন্ন ধরণের ফিল্টার এবং টেমপ্লেট ব্যবহার করে নিশ্চিত বিতরণ, স্ট্রিমিং এবং জটিল ইভেন্ট প্রক্রিয়াকরণের বাস্তবায়ন দেখতে চাই।

ফাইল স্থানান্তর পরিষেবা

EDA ছাড়াও, ফাইলগুলি স্থানান্তর করতে সক্ষম হওয়া ভাল হবে: একটি এন্টারপ্রাইজ স্কেলে, প্রায়শই শুধুমাত্র ফাইল ইন্টিগ্রেশন সম্ভব। বিশেষ করে, ETL (Extract, Transform, Load) আর্কিটেকচারাল প্যাটার্ন ব্যবহার করা হয়। এটিতে, একটি নিয়ম হিসাবে, প্রত্যেকে একচেটিয়াভাবে ফাইলগুলি আদান-প্রদান করে: বড় ডেটা ব্যবহার করা হয়, যা পৃথক অনুরোধে ধাক্কা দেওয়া অবাস্তব। এন্টারপ্রাইজ সার্ভিস মেশে নেটিভভাবে ফাইল স্থানান্তর সমর্থন করার ক্ষমতা আপনাকে আপনার ব্যবসার প্রয়োজনীয় নমনীয়তা দেয়।

অর্কেস্ট্রেশন পরিষেবা

বড় প্রতিষ্ঠানের প্রায় সবসময় বিভিন্ন দল বিভিন্ন পণ্য তৈরি করে থাকে। উদাহরণস্বরূপ, একটি ব্যাঙ্কে, কিছু দল আমানত নিয়ে কাজ করে, অন্যরা ঋণের পণ্যগুলির সাথে কাজ করে এবং এমন অনেকগুলি ঘটনা রয়েছে। এরা বিভিন্ন ব্যক্তি, বিভিন্ন দল যারা তাদের পণ্য তৈরি করে, তাদের API তৈরি করে এবং অন্যদের সরবরাহ করে। এবং খুব প্রায়ই এই পরিষেবাগুলি রচনা করার প্রয়োজন হয়, পাশাপাশি এপিআইগুলির একটি সেটকে ক্রমানুসারে কল করার জন্য জটিল যুক্তি প্রয়োগ করা হয়। এই সমস্যাটি সমাধান করার জন্য, আপনার ইন্টিগ্রেশন লেয়ারে একটি সমাধান দরকার যা এই সমস্ত যৌগিক যুক্তিকে সহজ করবে (বেশ কয়েকটি API কল করা, অনুরোধের রুট বর্ণনা করা ইত্যাদি)। এটি এন্টারপ্রাইজ সার্ভিস মেশের অর্কেস্ট্রেশন পরিষেবা।

এআই এবং এমএল

যখন মাইক্রোসার্ভিসগুলি একক ইন্টিগ্রেশন লেয়ারের মাধ্যমে যোগাযোগ করে, পরিষেবা মেশ স্বাভাবিকভাবেই প্রতিটি পরিষেবার কল সম্পর্কে সবকিছু জানে৷ আমরা টেলিমেট্রি সংগ্রহ করি: কে কাকে, কখন, কতক্ষণ, কতবার এবং আরও অনেক কিছু কল করে। যখন এই পরিষেবাগুলির শত সহস্র, এবং বিলিয়ন কল হয়, তখন এই সমস্তই জমা হয় এবং বিগ ডেটা গঠন করে। এই ডেটা AI, মেশিন লার্নিং ইত্যাদি ব্যবহার করে বিশ্লেষণ করা যেতে পারে এবং তারপর বিশ্লেষণের ফলাফলের উপর ভিত্তি করে কিছু দরকারী জিনিস করা যেতে পারে। অন্তত আংশিকভাবে এই সমস্ত নেটওয়ার্ক ট্র্যাফিকের নিয়ন্ত্রণ এবং পরিষেবা মেশে সংহত অ্যাপ্লিকেশন কলগুলিকে কৃত্রিম বুদ্ধিমত্তার কাছে হস্তান্তর করা উপযুক্ত হবে।

API গেটওয়ে পরিষেবা

সাধারণত, একটি পরিষেবা জালের প্রক্সি এবং পরিষেবা থাকে যা একটি বিশ্বস্ত পরিধির মধ্যে একে অপরের সাথে কথা বলে। কিন্তু বাইরের প্রতিপক্ষও আছে। ভোক্তাদের এই গ্রুপের কাছে উন্মুক্ত API-এর প্রয়োজনীয়তা অনেক বেশি গুরুতর। আমরা এই কাজটিকে দুটি প্রধান অংশে ভাগ করি।

• নিরাপত্তা. ddos সম্পর্কিত সমস্যা, প্রোটোকলের দুর্বলতা, অ্যাপ্লিকেশন, অপারেটিং সিস্টেম ইত্যাদি।
• স্কেল. যখন ক্লায়েন্টদের পরিবেশন করা প্রয়োজন এমন API-এর সংখ্যা হাজার হাজার বা এমনকি কয়েক হাজারের মধ্যে চলে যায়, তখন API-এর এই সেটের জন্য কিছু ধরণের পরিচালনার সরঞ্জামের প্রয়োজন হয়। আপনাকে ক্রমাগত এপিআই নিরীক্ষণ করতে হবে: তারা কাজ করছে কি না, তাদের অবস্থা কী, কী ট্র্যাফিক প্রবাহিত হচ্ছে, কী পরিসংখ্যান ইত্যাদি। একটি API গেটওয়ে পুরো প্রক্রিয়াটিকে পরিচালনাযোগ্য এবং সুরক্ষিত করার সময় এই কাজটি পরিচালনা করা উচিত। এই উপাদানটির জন্য ধন্যবাদ, এন্টারপ্রাইজ সার্ভিস মেশ সহজেই অভ্যন্তরীণ এবং বাহ্যিক উভয় API প্রকাশ করতে শেখে।

নির্দিষ্ট প্রোটোকল এবং ডেটা ফরম্যাটের জন্য সহায়তা পরিষেবা (AS গেটওয়ে)

বর্তমানে, বেশিরভাগ সার্ভিস মেশ সমাধান শুধুমাত্র HTTP এবং HTTP2 ট্র্যাফিকের সাথে বা TCP/IP স্তরে একটি হ্রাস মোডে কাজ করতে পারে। এন্টারপ্রাইজ সার্ভিস মেশ অন্যান্য অনেক নির্দিষ্ট ডেটা ট্রান্সফার প্রোটোকলের সাথে আবির্ভূত হচ্ছে। কিছু সিস্টেম মেসেজ ব্রোকার ব্যবহার করতে পারে, অন্যগুলো ডাটাবেস লেভেলে ইন্টিগ্রেটেড। যদি কোম্পানির এসএপি থাকে, তবে এটি নিজস্ব ইন্টিগ্রেশন সিস্টেমও ব্যবহার করতে পারে। তদুপরি, এই সমস্ত কাজ করে এবং ব্যবসার একটি গুরুত্বপূর্ণ অংশ।

আপনি শুধু বলতে পারবেন না: "আসুন উত্তরাধিকার পরিত্যাগ করি এবং পরিষেবা মেশ ব্যবহার করতে পারে এমন নতুন সিস্টেম তৈরি করি।" সমস্ত পুরানো সিস্টেমকে নতুনের সাথে সংযুক্ত করতে (একটি মাইক্রোসার্ভিস আর্কিটেকচারে), যে সিস্টেমগুলি সার্ভিস মেশ ব্যবহার করতে পারে তাদের জন্য কিছু ধরণের অ্যাডাপ্টার, মধ্যস্থতাকারী, গেটওয়ের প্রয়োজন হবে। সম্মত হন, যদি এটি পরিষেবা সহ একটি বাক্সে আসে তবে এটি ভাল হবে। এসি গেটওয়ে যেকোনো ইন্টিগ্রেশন বিকল্পকে সমর্থন করতে পারে। শুধু কল্পনা করুন, আপনি শুধু এন্টারপ্রাইজ সার্ভিস মেশ ইনস্টল করেছেন এবং এটি আপনার প্রয়োজনীয় সমস্ত প্রোটোকলের সাথে ইন্টারঅ্যাক্ট করার জন্য প্রস্তুত। এই পদ্ধতি আমাদের জন্য খুবই গুরুত্বপূর্ণ.

মোটামুটি এভাবেই আমরা সার্ভিস মেশ (এন্টারপ্রাইজ সার্ভিস মেশ) এর কর্পোরেট সংস্করণ কল্পনা করি। বর্ণিত কাস্টমাইজেশন ইন্টিগ্রেশন প্ল্যাটফর্মের রেডিমেড ওপেন-সোর্স সংস্করণগুলি ব্যবহার করার চেষ্টা করার সময় উদ্ভূত বেশিরভাগ সমস্যার সমাধান করে। মাত্র কয়েক বছর আগে প্রবর্তিত, সার্ভিস মেশ আর্কিটেকচার বিকশিত হতে থাকে এবং আমরা এর উন্নয়নে অবদান রাখতে পেরে উত্তেজিত। আমরা আশা করি আমাদের অভিজ্ঞতা আপনার কাজে লাগবে।

উত্স: www.habr.com