በባዶ ውስጥ ፎቶዎችን ለማከማቸት እና ለማጋራት አርክቴክቸር

አርቴም ዴኒሶቭ (እ.ኤ.አ.) bo0rsh201, Badoo)

Badoo በዓለም ትልቁ ነው የፍቅር ግንኙነት ጣቢያ. በአሁኑ ጊዜ በዓለም ዙሪያ ወደ 330 ሚሊዮን የተመዘገቡ ተጠቃሚዎች አሉን። ግን ዛሬ በንግግራችን አውድ ውስጥ በጣም አስፈላጊው ነገር ወደ 3 petabytes የተጠቃሚ ፎቶዎችን እናከማቻለን ነው። በየቀኑ ተጠቃሚዎቻችን ወደ 3,5 ሚሊዮን የሚጠጉ አዳዲስ ፎቶዎችን ይሰቅላሉ፣ እና የንባብ ሸክሙ ስለ ነው። በሰከንድ 80 ሺህ ጥያቄዎች. ይህ ለጀርባችን በጣም ብዙ ነው ፣ እና አንዳንድ ጊዜ በዚህ ላይ ችግሮች አሉ።

በአጠቃላይ ፎቶዎችን ስለሚያከማች እና እንደሚልክ ስለ ስርዓቱ ንድፍ እናገራለሁ, እና ከገንቢው እይታ አንጻር እመለከታለሁ. እንዴት እንደዳበረ አጭር የድጋሚ እይታ ይኖራል፣ እዚያም ዋና ዋናዎቹን ክንውኖች እገልጻለሁ፣ ነገር ግን አሁን እየተጠቀምንባቸው ስላሉት መፍትሄዎች ብቻ በዝርዝር እናገራለሁ።

አሁን እንጀምር።

እንዳልኩት, ይህ ወደ ኋላ ተመልሶ ይሆናል, እና የሆነ ቦታ ለመጀመር, በጣም የተለመደውን ምሳሌ እንውሰድ.

የጋራ ተግባር አለን የተጠቃሚ ፎቶዎችን መቀበል፣ ማከማቸት እና መላክ አለብን። በዚህ ቅፅ፣ ስራው አጠቃላይ ነው፣ ማንኛውንም ነገር መጠቀም እንችላለን፡-

• ዘመናዊ የደመና ማከማቻ ፣
• በቦክስ የተሞላ መፍትሄ ፣ ከእነዚህም ውስጥ አሁን ብዙ ናቸው ።
• በመረጃ ማዕከላችን ውስጥ ብዙ ማሽኖችን አዘጋጅተን ትላልቅ ሃርድ ድራይቭን በላያቸው ላይ በማድረግ ፎቶዎችን ማከማቸት እንችላለን።

ባዱ በታሪክ - አሁንም እና ከዚያም (ገና ገና በጨቅላነቱ በነበረበት ጊዜ) - በራሱ አገልጋዮች ላይ ይኖራል, በራሳችን ዲሲዎች ውስጥ. ስለዚህ, ይህ አማራጭ ለእኛ በጣም ጥሩ ነበር.

ብዙ ማሽኖችን ወስደን “ፎቶዎች” ብለን ጠርተናል፣ እና ፎቶዎችን የሚያከማች ክላስተር አግኝተናል። ግን የሆነ ነገር የጠፋ ይመስላል። ይህ ሁሉ እንዲሠራ, በየትኛው ማሽን ላይ የትኞቹን ፎቶዎች እንደምናከማች እንደምንም መወሰን አለብን. እና እዚህም, አሜሪካን መክፈት አያስፈልግም.

ስለተጠቃሚዎች መረጃ ያለው የተወሰነ መስክ ወደ ማከማቻችን እንጨምራለን። ይህ የሻርዲንግ ቁልፍ ይሆናል። በእኛ ሁኔታ place_id ብለን ጠራነው፣ እና ይህ የቦታ መታወቂያ የተጠቃሚ ፎቶዎች የሚቀመጡበትን ቦታ ያመለክታል። ካርታዎችን እንሰራለን.

በመጀመሪያ ደረጃ, ይህ በእጅ እንኳን ሊከናወን ይችላል - የዚህ ተጠቃሚ ፎቶ በእንደዚህ አይነት አገልጋይ ላይ ይወርዳል እንላለን. ለዚህ ካርታ ምስጋና ይግባውና አንድ ተጠቃሚ ፎቶ ሲሰቅል፣ የት እንደሚያስቀምጠው እና ከየት እንደምንሰጥ እናውቃለን።

ይህ በጣም ቀላል እቅድ ነው, ግን በጣም ጠቃሚ ጥቅሞች አሉት. የመጀመርያው ቀላል ነው እንዳልኩት ሁለተኛው ደግሞ በዚህ አካሄድ በቀላሉ አዳዲስ መኪኖችን በማቀበል እና በካርታው ላይ በመጨመር በቀላሉ አግድም መመዘን እንችላለን። ሌላ ምንም ነገር ማድረግ አያስፈልግዎትም.

ለተወሰነ ጊዜ ለኛ እንዲህ ነበር።

ይህ በ2009 አካባቢ ነበር። መኪና አደረሱ፣ አደረሱ...

እና በአንድ ወቅት ይህ እቅድ አንዳንድ ድክመቶች እንዳሉት ማስተዋል ጀመርን. ጉዳቶቹ ምንድን ናቸው?

በመጀመሪያ ደረጃ, የአቅም ውስንነት አለ. የምንፈልገውን ያህል ሃርድ ድራይቮች ወደ አንድ አካላዊ አገልጋይ መጎተት አንችልም። እና ይህ በጊዜ ሂደት እና በመረጃ ስብስብ እድገት ላይ የተወሰነ ችግር ሆኗል.

እና ሁለተኛ. ይህ የማይታወቅ የማሽኖች ውቅር ነው ፣ ምክንያቱም እንደዚህ ያሉ ማሽኖች በአንዳንድ ሌሎች ዘለላዎች ውስጥ እንደገና ለመጠቀም አስቸጋሪ ናቸው ፣ እነሱ በጣም ልዩ ናቸው ፣ ማለትም። በአፈፃፀም ደካማ መሆን አለባቸው, ግን በተመሳሳይ ጊዜ ከትልቅ ሃርድ ድራይቭ ጋር.

ይህ ሁሉ ለ 2009 ነበር, ነገር ግን, በመርህ ደረጃ, እነዚህ መስፈርቶች ዛሬም ጠቃሚ ናቸው. እኛ ወደ ኋላ መመለስ አለን, ስለዚህ በ 2009 ሁሉም ነገር በዚህ ሙሉ በሙሉ መጥፎ ነበር.

እና የመጨረሻው ነጥብ ዋጋው ነው.

በዚያን ጊዜ ዋጋው በጣም ከባድ ነበር, እና አንዳንድ አማራጮችን መፈለግ አለብን. እነዚያ። በመረጃ ማእከሎች ውስጥ ያለውን ቦታ እና ይህ ሁሉ የሚገኝባቸውን አካላዊ አገልጋዮች በሆነ መንገድ በተሻለ ሁኔታ መጠቀም ነበረብን። እና የእኛ ስርዓት መሐንዲሶች ብዙ የተለያዩ አማራጮችን የገመገሙበት ትልቅ ጥናት ጀመሩ። እንደ ፖሊሴፍ እና ሉስተር ያሉ የተሰባሰቡ የፋይል ስርዓቶችንም ተመልክተዋል። የአፈጻጸም ችግሮች እና በጣም አስቸጋሪ ስራዎች ነበሩ. እምቢ አሉ። እንደምንም ከፍ ለማድረግ ሙሉውን ዳታ ስብስብ በNFS በእያንዳንዱ መኪና ላይ ለመጫን ሞክረናል። ንባብም ደካማ ነበር፣ ከተለያዩ አቅራቢዎች የተለያዩ መፍትሄዎችን ሞክረናል።

እና በመጨረሻ፣ የማከማቻ አካባቢ ኔትወርክ እየተባለ የሚጠራውን በመጠቀም ተስማምተናል።

እነዚህ ትላልቅ ኤስኤችዲዎች በተለይ ከፍተኛ መጠን ያለው መረጃ ለማከማቸት የተነደፉ ናቸው። በመጨረሻው የኦፕቲካል ውፅዓት ማሽኖች ላይ የተጫኑ ዲስኮች ያላቸው መደርደሪያዎች ናቸው. ያ። እኛ አንዳንድ ዓይነት ማሽኖች አሉን ፣ በጣም ትንሽ እና እነዚህ SHDs ፣ለመላክ አመክንዮአችን ግልፅ ናቸው ፣ ማለትም. ለእነዚህ ፎቶዎች ጥያቄዎችን ለማቅረብ ለኛ nginx ወይም ሌላ ማንኛውም ሰው።

ይህ ውሳኔ ግልጽ የሆኑ ጥቅሞች ነበሩት. ይህ SHD ነው። ፎቶዎችን ለማከማቸት ያለመ ነው። ይሄ ማሽኖችን በሃርድ ድራይቮች ከማስታጠቅ የበለጠ ርካሽ ይሰራል።

ሁለተኛ ፕላስ።

ይህ አቅም በጣም ትልቅ ሆኗል, ማለትም. በጣም ትንሽ በሆነ መጠን ብዙ ተጨማሪ ማከማቻዎችን ማስተናገድ እንችላለን።

ግን በፍጥነት ብቅ ያሉ ጉዳቶችም ነበሩ። በዚህ ስርዓት ላይ የተጠቃሚዎች ቁጥር እና ጭነት እየጨመረ በሄደ ቁጥር የአፈጻጸም ችግሮች መፈጠር ጀመሩ። እና እዚህ ያለው ችግር በጣም ግልጽ ነው - ብዙ ፎቶዎችን በትንሽ መጠን ለማከማቸት የተነደፈ ማንኛውም SHD, እንደ አንድ ደንብ, በከፍተኛ ንባብ ይሰቃያል. ይህ ለማንኛውም የደመና ማከማቻ ወይም ሌላ ማንኛውም ነገር እውነት ነው። አሁን እጅግ በጣም ሊሰፋ የሚችል ተስማሚ ማከማቻ የለንም ፣ ማንኛውንም ነገር ወደ ውስጥ ማስገባት ይችላሉ እና ንባቦችን በደንብ ይታገሣል። በተለይ ተራ ንባብ።

በፎቶዎቻችን ላይ እንደሚታየው, ፎቶዎች የሚጠየቁት ያለማቋረጥ ነው, እና ይሄ በአፈፃፀማቸው ላይ ከፍተኛ ተጽዕኖ ያሳድራል.

ዛሬ ባለው አኃዛዊ መረጃ መሠረት እንኳን, ማከማቻ በተገናኘበት ማሽን ላይ ለፎቶዎች ከ ​​500 RPS በላይ የሆነ ቦታ ካገኘን, ችግሮች ቀድሞውኑ ይጀምራሉ. እና ለእኛ በቂ መጥፎ ነበር, ምክንያቱም የተጠቃሚዎች ቁጥር እያደገ ነው, ነገሮች እየባሱ ይሄዳሉ. ይህ በሆነ መንገድ ማመቻቸት አለበት።

ለማመቻቸት, በዚያን ጊዜ ወስነናል, ግልጽ በሆነ መልኩ, የጭነት መገለጫውን ለመመልከት - ምን በአጠቃላይ, ምን እየተከሰተ እንዳለ, ምን ማመቻቸት እንዳለበት.

እና እዚህ ሁሉም ነገር በእጃችን ይጫወታል.

በመጀመሪያው ስላይድ ላይ አስቀድሜ ተናግሬአለሁ፡ በቀን 80 ሚሊዮን ሰቀላዎች በሰከንድ 3,5 ሺህ የማንበብ ጥያቄዎች አሉን:: ያም ማለት ይህ የሶስት ቅደም ተከተሎች ልዩነት ነው. ንባብ ማመቻቸት እንዳለበት ግልጽ ነው እና እንዴት እንደሆነ በተግባር ግልጽ ነው.

አንድ ተጨማሪ ትንሽ ነጥብ አለ. የአገልግሎቱ ልዩ ገጽታዎች አንድ ሰው መመዝገብ, ፎቶን ሲሰቅል, ከዚያም እንደነሱ ሌሎች ሰዎችን በንቃት መመልከት ይጀምራል እና ለሌሎች ሰዎች በንቃት ይታያል. ከዚያም የትዳር ጓደኛን አገኘ ወይም የትዳር ጓደኛ አላገኘም, እንደ ሁኔታው ​​ይወሰናል, እና ለተወሰነ ጊዜ አገልግሎቱን መጠቀም ያቆማል. በዚህ ጊዜ, ሲጠቀም, ፎቶዎቹ በጣም ሞቃት ናቸው - በፍላጎት ላይ ናቸው, ብዙ ሰዎች ይመለከቷቸዋል. ልክ ይህን ማድረጉን እንዳቆመ፣ ልክ እንደበፊቱ ለሌሎች ሰዎች መጋለጥን በፍጥነት ይተዋል፣ እና ፎቶዎቹ በጭራሽ አይጠየቁም።

እነዚያ። በጣም ትንሽ ትኩስ የውሂብ ስብስብ አለን። ግን በተመሳሳይ ጊዜ ለእሱ ብዙ ጥያቄዎች አሉ. እና እዚህ ሙሉ በሙሉ ግልጽ የሆነ መፍትሄ መሸጎጫ መጨመር ነው.

ከ LRU ጋር ያለው መሸጎጫ ሁሉንም ችግሮቻችንን ይፈታል። ምን እየሰራን ነው?

በትልቁ ክላስተር ፊት ለፊት ባለው ማከማቻ ፊት ለፊት ሌላ ትንሽ እንጨምራለን ይህም ፎቶካች ይባላል። ይህ በመሠረቱ መሸጎጫ ፕሮክሲ ብቻ ነው።

ከውስጥ እንዴት እንደሚሰራ? የእኛ ተጠቃሚ እዚህ ነው፣ እዚህ ማከማቻ አለ። ሁሉም ነገር እንደበፊቱ ተመሳሳይ ነው. በመካከል ምን እንጨምር?

ፈጣን የሆነ አካላዊ አካባቢያዊ ዲስክ ያለው ማሽን ብቻ ነው። ይህ ለምሳሌ ከኤስኤስዲ ጋር ነው። እና አንዳንድ አይነት አካባቢያዊ መሸጎጫ በዚህ ዲስክ ላይ ተከማችቷል.

ምን ይመስላል? ተጠቃሚው የፎቶ ጥያቄ ይልካል። NGINX በመጀመሪያ በአካባቢያዊ መሸጎጫ ውስጥ ይፈልጋል. ካልሆነ፣ በቀላሉ ወደ ማከማቻችን proxy_pass፣ ፎቶውን ከዚያ ያውርዱ እና ለተጠቃሚው ይስጡት።

ነገር ግን ይህ በጣም ባናል ነው እና በውስጡ ምን እየሆነ እንዳለ ግልጽ አይደለም. እንደዚህ አይነት ነገር ይሰራል.

መሸጎጫው በምክንያታዊነት በሶስት ንብርብሮች የተከፈለ ነው. "ሶስት ንብርብሮች" ስል, ይህ ማለት አንድ ዓይነት ውስብስብ ስርዓት አለ ማለት አይደለም. አይ፣ እነዚህ በሁኔታዊ ሁኔታ በፋይል ስርዓቱ ውስጥ ሶስት ማውጫዎች ብቻ ናቸው።

1. ይህ አሁን ከፕሮክሲ ሂድ የወረዱ ፎቶዎች የሚገኝበት ቋት ነው።
2. ይህ በአሁኑ ጊዜ በንቃት የተጠየቁ ፎቶዎችን የሚያከማች ትኩስ መሸጎጫ ነው።
3. እና ቀዝቃዛ መሸጎጫ፣ ጥቂት ጥያቄዎች ሲመጡ ፎቶዎች ቀስ በቀስ ከትኩስ መሸጎጫ ውስጥ የሚገፉበት።

ይህ እንዲሰራ፣ ይህን መሸጎጫ እንደምንም ማስተዳደር አለብን፣ በውስጡ ያሉትን ፎቶዎች ማስተካከል አለብን፣ ወዘተ. ይህ ደግሞ በጣም ጥንታዊ ሂደት ነው.

ለእያንዳንዱ ጥያቄ Nginx በቀላሉ ወደ RAMDisk access.log ይጽፋል፣ በዚህ ውስጥ አሁን ያገለገለው ፎቶ (በእርግጥ አንጻራዊ መንገድ) እና የትኛው ክፍል እንደቀረበ የሚያመለክት ነው። እነዚያ። “ፎቶ 1” ሊል ይችላል እና ከዚያ ወይ ቋት፣ ወይም ሙቅ መሸጎጫ፣ ወይም ቀዝቃዛ መሸጎጫ፣ ወይም ፕሮክሲ።

በዚህ ላይ በመመስረት, በፎቶው ላይ ምን ማድረግ እንዳለብን እንደምንም መወሰን አለብን.

በእያንዳንዱ ማሽን ላይ ይህንን ሎግ ያለማቋረጥ የሚያነብ እና የተወሰኑ ፎቶግራፎችን በማስታወስ ውስጥ ጥቅም ላይ የሚውል ስታቲስቲክስን የሚያከማች ትንሽ ዴሞን አለን ።

በቀላሉ እዚያ ይሰበስባል, ቆጣሪዎቹን ያስቀምጣል እና በየጊዜው የሚከተሉትን ያደርጋል. እሱ በንቃት የተጠየቁ ፎቶዎችን ያንቀሳቅሳል, ለዚህም ብዙ ጥያቄዎች ወደሚገኙበት, ወደ ሙቅ መሸጎጫ, የትም ይሁኑ.

አልፎ አልፎ የሚጠየቁ እና ብዙም ያልተጠየቁ ፎቶዎች ቀስ በቀስ ከትኩስ መሸጎጫ ወደ ቀዝቃዛው ይገፋሉ።

እና በመሸጎጫው ውስጥ ያለው ቦታ ሲያልቅ በቀላሉ ሁሉንም ነገር ከቀዝቃዛው መሸጎጫ ያለምንም ልዩነት መሰረዝ እንጀምራለን. እና በነገራችን ላይ ይህ በደንብ ይሰራል.

ፎቶው ወደ ቋት ሲወከል ወዲያውኑ እንዲቀመጥ፣ የፕሮክሲ_ስቶር መመሪያን እንጠቀማለን እና ቋት እንዲሁ RAMDisk ነው፣ ማለትም። ለተጠቃሚው በጣም በፍጥነት ይሰራል. ይህ የመሸጎጫ አገልጋዩን ውስጣዊ ሁኔታ ይመለከታል።

የቀረው ጥያቄ በእነዚህ አገልጋዮች ላይ ጥያቄዎችን እንዴት ማሰራጨት እንደሚቻል ነው።

ሃያ የማከማቻ ማሽኖች እና ሶስት መሸጎጫ ሰርቨሮች ክላስተር አለ (እንዲህ ሆነ) እንበል።

የትኛዎቹ ጥያቄዎች የትኛዎቹ ፎቶዎች እንደሆኑ እና የት እንደምናርፍ እንደምንም መወሰን አለብን።

በጣም የተለመደው አማራጭ Round Robin ነው. ወይስ በአጋጣሚ ነው የሚሰራው?

ይህ በግልጽ በርካታ ጉዳቶች አሉት ምክንያቱም በእንደዚህ ዓይነት ሁኔታ ውስጥ መሸጎጫውን በጣም ውጤታማ በሆነ መንገድ እንጠቀማለን ። ጥያቄዎች በአንዳንድ የዘፈቀደ ማሽኖች ላይ ያርፋሉ፡ እዚህ ተሸፍኗል፣ ግን በሚቀጥለው ላይ ግን የለም። እና ይሄ ሁሉ የሚሰራ ከሆነ, በጣም መጥፎ ይሆናል. በክላስተር ውስጥ አነስተኛ ቁጥር ያላቸው ማሽኖች እንኳን.

የትኛውን አገልጋይ የትኛውን ጥያቄ እንደሚያርፍ በማያሻማ ሁኔታ መወሰን አለብን።

ባናል መንገድ አለ። ሃሹን ከዩአርኤል ወይም ሃሽ ከሻርዲንግ ቁልፋችን ወስደን በዩአርኤል ውስጥ ካለው እና በአገልጋዮቹ ብዛት እንካፈላለን። ይሰራል? ፈቃድ

እነዚያ። 2% ጥያቄ አለን ፣ ለምሳሌ ፣ ለአንዳንድ “example_url” ሁል ጊዜ በአገልጋዩ ላይ በመረጃ ጠቋሚ “XNUMX” ያርፋል ፣ እና መሸጎጫው በተቻለ መጠን በተቻለ መጠን በቋሚነት ይወገዳል።

ነገር ግን በእንደዚህ አይነት እቅድ ውስጥ እንደገና ማጋራት ላይ ችግር አለ. ዳግም ማጋራት - የአገልጋዮችን ቁጥር መቀየር ማለቴ ነው።

የእኛ መሸጎጫ ክላስተር ከአሁን በኋላ መቋቋም እንደማይችል እናስብ እና ሌላ ማሽን ለመጨመር ወሰንን.

እንጨምር።

አሁን ሁሉም ነገር የሚከፋፈለው በሶስት ሳይሆን በአራት ነው። ስለዚህ፣ ቀድሞ የነበሩት ሁሉም ማለት ይቻላል፣ ሁሉም ማለት ይቻላል ዩአርኤሎች አሁን በሌሎች አገልጋዮች ላይ ይኖራሉ። መላው መሸጎጫ በቀላሉ ለአፍታ ተበላሽቷል። ሁሉም ጥያቄዎች በእኛ የማከማቻ ክላስተር ላይ ወድቀዋል፣ ደህና ሆነ፣ የአገልግሎት ውድቀት እና ተጠቃሚዎች አልረኩም። ያንን ማድረግ አልፈልግም።

ይህ አማራጭ እኛንም አይስማማንም።

ያ። ምን እናድርግ? በሆነ መንገድ መሸጎጫውን በብቃት መጠቀም፣ ተመሳሳዩን ጥያቄ በተመሳሳዩ አገልጋይ ላይ ደጋግመን ማቅረብ አለብን፣ ነገር ግን ዳግም ማጋራትን እንቃወም። እና እንደዚህ አይነት መፍትሄ አለ, ያን ያህል የተወሳሰበ አይደለም. ወጥ የሆነ ሃሽንግ ይባላል።

ምን ይመስላል?

ከሻርዲንግ ቁልፍ የተወሰነ ተግባር እንወስዳለን እና ሁሉንም እሴቶቹን በክበቡ ላይ እናሰራጫለን። እነዚያ። በነጥብ 0 ፣ ዝቅተኛው እና ከፍተኛው እሴቶቹ ይሰበሰባሉ። በመቀጠል፣ ሁሉንም አገልጋዮቻችንን በተመሳሳይ ክበብ ላይ በግምት በዚህ መንገድ እናስቀምጣለን።

እያንዳንዱ አገልጋይ በአንድ ነጥብ ይገለጻል, እና ወደ እሱ በሰዓት አቅጣጫ የሚሄደው ሴክተር በዚህ አስተናጋጅ ያገለግላል. ጥያቄዎች ወደ እኛ ሲመጡ ወዲያውኑ እናያለን ለምሳሌ ፣ ጥያቄ A - እዚያ ሃሽ አለው - እና በአገልጋዩ 2. Request B - በአገልጋይ 3. እና ወዘተ.

እንደገና በሚጋራበት ጊዜ በዚህ ሁኔታ ውስጥ ምን ይከሰታል?

ሙሉውን መሸጎጫ ልክ እንደበፊቱ አናሰርሰውም ሁሉንም ቁልፎችም አንቀይርም ነገርግን እያንዳንዱን ሴክተር በአጭር ርቀት በመቀያየር በአንፃራዊነት ልንጨምርበት የምንፈልገው ስድስተኛው አገልጋያችን ነፃ ቦታ ላይ እንዲገባ እና እዚያ እንጨምረዋለን.

እርግጥ ነው, በእንደዚህ ዓይነት ሁኔታ ውስጥ ቁልፎች እንዲሁ ይወጣሉ. ነገር ግን ከበፊቱ በበለጠ ደካማ ሆነው ይንቀሳቀሳሉ. እና የመጀመሪያዎቹ ሁለቱ ቁልፎች በአገልጋዮቻቸው ላይ እንደቀሩ እና መሸጎጫ አገልጋዩ ለመጨረሻው ቁልፍ ብቻ እንደተለወጠ እናያለን። ይሄ በብቃት ይሰራል፣ እና አዳዲስ አስተናጋጆችን እየጨመሩ ከጨመሩ እዚህ ምንም ትልቅ ችግር የለም። አንድ ጊዜ ትንሽ ጨምረህ ጨምረህ፣ መሸጎጫው እንደገና እስኪሞላ ድረስ ጠብቅ፣ እና ሁሉም ነገር በደንብ ይሰራል።

ጥያቄው እምቢ ካለ ብቻ ይቀራል። አንድ ዓይነት መኪና ከአገልግሎት ውጪ እንደሆነ እናስብ።

እና በዚህ ጊዜ ይህንን ካርታ እንደገና ማደስ አንፈልግም ፣ የመሸጎጫውን ክፍል ውድቅ ማድረግ እና ሌሎችም ፣ ለምሳሌ ማሽኑ እንደገና ከተጀመረ እና በሆነ መንገድ የአገልግሎት ጥያቄዎችን እንፈልጋለን። በቀላሉ በእያንዳንዱ ጣቢያ ላይ አንድ የመጠባበቂያ ፎቶ መሸጎጫ እናስቀምጠዋለን፣ይህም በአሁኑ ጊዜ ለጠፋ ማንኛውም ማሽን ምትክ ሆኖ ያገለግላል። እና በድንገት ከአገልጋዮቻችን አንዱ የማይገኝ ከሆነ ትራፊኩ ወደዚያ ይሄዳል። በተፈጥሮ, እዚያ ምንም መሸጎጫ የለንም, ማለትም. በጣም ቀዝቃዛ ነው፣ ነገር ግን ቢያንስ የተጠቃሚ ጥያቄዎች በሂደት ላይ ናቸው። ይህ አጭር ክፍተት ከሆነ, ሙሉ በሙሉ በእርጋታ እንለማመዳለን. በማከማቻ ላይ ተጨማሪ ጭነት ብቻ አለ። ይህ ክፍተት ረጅም ከሆነ, እኛ አስቀድመን ውሳኔ ማድረግ እንችላለን - ይህን አገልጋይ ከካርታው ላይ ለማስወገድ ወይም ላለማጥፋት, ወይም ምናልባት በሌላ መተካት.

ይህ ስለ መሸጎጫ ስርዓት ነው። ውጤቶቹን እንይ።

እዚህ ምንም የተወሳሰበ ነገር ያለ አይመስልም. ነገር ግን ይህ መሸጎጫውን የማስተዳደር ዘዴ 98% ያህል ብልሃተኛ ፍጥነት ሰጥቶናል። እነዚያ። ከእነዚህ 80 ሺህ ጥያቄዎች ውስጥ በሰከንድ 1600 ብቻ ማከማቻ ይደርሳሉ ፣ እና ይህ ሙሉ በሙሉ መደበኛ ጭነት ነው ፣ በእርጋታ ይቋቋማሉ ፣ ሁል ጊዜ መጠባበቂያ አለን ።

እነዚህን አገልጋዮች በሶስት ዲሲዎቻችን ውስጥ አስቀመጥናቸው፣ እና ሶስት የመገኛ ቦታ አግኝተናል - ፕራግ፣ ማያሚ እና ሆንግ ኮንግ።

ያ። በየእኛ ኢላማ ገበያዎች ብዙ ወይም ባነሰ በአካባቢው ይገኛሉ።

እና እንደ ጥሩ ጉርሻ፣ ይህ ሲፒዩ ስራ ፈት የሆነበትን ይህን የመሸጎጫ ፕሮክሲ አግኝተናል፣ ምክንያቱም ይዘትን ለማገልገል ያን ያህል አያስፈልግም። እና እዚያ፣ NGINX+ Luaን በመጠቀም፣ ብዙ የአጠቃቀም አመክንዮዎችን ተግባራዊ አድርገናል።

ለምሳሌ፣ በዌብፕ ወይም ተራማጅ jpeg (እነዚህ ውጤታማ ዘመናዊ ቅርጸቶች ናቸው)፣ ትራፊክን እንዴት እንደሚጎዳ ይመልከቱ፣ አንዳንድ ውሳኔዎችን ለማድረግ፣ ለተወሰኑ አገሮች ማንቃት እና የመሳሰሉትን መሞከር እንችላለን። በመብረር ላይ ተለዋዋጭ መጠንን ያድርጉ ወይም ፎቶዎችን ይከርክሙ።

ይህ ለምሳሌ ፎቶዎችን የሚያሳይ የሞባይል አፕሊኬሽን ሲኖርዎት እና የሞባይል አፕሊኬሽኑ ትልቅ ፎቶ በመጠየቅ የደንበኛውን ሲፒዩ ማባከን የማይፈልግ ከሆነ እና ወደ እሱ ለመግፋት ወደ የተወሰነ መጠን ሲቀይር ይህ ጥሩ ጥቅም ነው። እይታው ። እኛ በቀላሉ በተለዋዋጭ አንዳንድ መለኪያዎችን በ UPort ሁኔታዊ ዩአርኤል ውስጥ መግለፅ እንችላለን፣ እና የፎቶ መሸጎጫው የፎቶውን መጠን ይቀይረዋል። እንደ ደንቡ ፣ እኛ በአካል በዲስክ ላይ ያለን መጠን ፣ ከተጠየቀው ጋር በተቻለ መጠን በቅርብ ይመርጣል እና በተወሰኑ መጋጠሚያዎች ይሽጠዋል።

በነገራችን ላይ የከፍተኛ ጭነት ስርዓቶች ገንቢዎች ኮንፈረንስ ላለፉት አምስት ዓመታት በይፋ የሚገኙ የቪዲዮ ቀረጻዎችን አድርገናል HighLoad ++. ይመልከቱ፣ ይማሩ፣ ያጋሩ እና ለደንበኝነት ይመዝገቡ የዩቲዩብ ቻናል.

እዚያም ብዙ የምርት አመክንዮ ማከል እንችላለን። ለምሳሌ፣ የዩአርኤል መለኪያዎችን በመጠቀም የተለያዩ የውሃ ምልክቶችን ማከል እንችላለን፣ ፎቶዎችን ማደብዘዝ፣ ማደብዘዝ ወይም ፒክሰል ማድረግ እንችላለን። ይህ የአንድን ሰው ፎቶ ለማሳየት ስንፈልግ ነው, ነገር ግን ፊቱን ማሳየት አንፈልግም, ይህ በጥሩ ሁኔታ ይሰራል, ሁሉም እዚህ ተተግብሯል.

ምን አገኘን? ሶስት የመገኘት ነጥቦች አግኝተናል፣ ጥሩ የማታለያ ተመን፣ እና በተመሳሳይ ጊዜ በእነዚህ ማሽኖች ላይ ስራ ፈት ሲፒዩ የለንም ። እሱ አሁን ከበፊቱ የበለጠ አስፈላጊ ሆኗል. ለራሳችን የበለጠ ጠንካራ መኪናዎችን መስጠት አለብን, ግን ዋጋ ያለው ነው.

ይህ የፎቶግራፍ መመለስን ይመለከታል። እዚህ ሁሉም ነገር ግልጽ እና ግልጽ ነው. አሜሪካን ያላገኘሁት ይመስለኛል፣ ማንኛውም CDN በዚህ መንገድ ይሰራል ማለት ይቻላል።

እና ምናልባትም ፣ የተራቀቀ አድማጭ ጥያቄ ሊኖረው ይችላል-ለምን ሁሉንም ነገር ወደ ሲዲኤን ብቻ አይለውጡም? ተመሳሳይ ይሆናል፤ ሁሉም ዘመናዊ ሲዲኤን ይህን ማድረግ ይችላሉ። እና በርካታ ምክንያቶች አሉ.

የመጀመሪያው ፎቶግራፎች ናቸው.

ይህ ከመሠረተ ልማታችን ውስጥ አንዱ ቁልፍ ነው, እና በተቻለ መጠን በእሱ ላይ ቁጥጥር ያስፈልገናል. ይህ ከሶስተኛ ወገን ሻጭ የሆነ ዓይነት መፍትሄ ከሆነ እና በእሱ ላይ ምንም ስልጣን ከሌለዎት ትልቅ የውሂብ ስብስብ ሲኖርዎት እና በጣም ትልቅ ፍሰት ሲኖርዎት ከእሱ ጋር መኖር ለእርስዎ በጣም ከባድ ይሆንብዎታል የተጠቃሚ ጥያቄዎች.

አንድ ምሳሌ ልስጥህ። አሁን፣ በመሠረተ ልማታችን፣ ለምሳሌ፣ አንዳንድ ችግሮች ቢገጥሙን ወይም ከመሬት በታች ቢያንኳኳ፣ ወደ ማሽኑ ሄደን በአንፃራዊነት እዛው መዘባረቅ እንችላለን። የምንፈልጋቸውን የአንዳንድ መለኪያዎች ስብስብ ማከል እንችላለን፣ በሆነ መንገድ መሞከር እንችላለን፣ ይህ በግራፍ ላይ እንዴት እንደሚጎዳ ይመልከቱ፣ እና የመሳሰሉት። አሁን በዚህ መሸጎጫ ክላስተር ላይ ብዙ ስታቲስቲክስ እየተሰበሰበ ነው። እና በየጊዜው እንመለከተዋለን እና አንዳንድ ያልተለመዱ ነገሮችን በማሰስ ረጅም ጊዜ እናሳልፋለን። በሲዲኤን በኩል ከሆነ, ለመቆጣጠር በጣም ከባድ ይሆናል. ወይም, ለምሳሌ, አንድ ዓይነት አደጋ ቢከሰት, ምን እንደተፈጠረ እናውቃለን, ከእሱ ጋር እንዴት እንደሚኖሩ እና እንዴት ማሸነፍ እንደሚቻል እናውቃለን. ይህ የመጀመሪያው መደምደሚያ ነው.

ሁለተኛው መደምደሚያ እንዲሁ ታሪካዊ ነው, ምክንያቱም ስርዓቱ ለረጅም ጊዜ እያደገ ነው, እና በተለያዩ ደረጃዎች ብዙ የተለያዩ የንግድ መስፈርቶች ስለነበሩ እና ሁልጊዜ ከሲዲኤን ጽንሰ-ሀሳብ ጋር አይጣጣሙም.

እና ከቀዳሚው ቀጥሎ ያለው ነጥብ ነው።

ይህ የሆነበት ምክንያት በፎቶ መሸጎጫዎች ላይ ብዙ ልዩ አመክንዮዎች አሉን ፣ ይህም ሁል ጊዜ ሲጠየቅ ሊታከል አይችልም። ማንኛውም ሲዲኤን አንዳንድ ብጁ ነገሮችን በጥያቄዎ ላይ ያክልልህ ብሎ ማሰብ ዘበት ነው። ለምሳሌ፣ ደንበኛው የሆነ ነገር መለወጥ እንዲችል ካልፈለጉ URLን ማመስጠር። በአገልጋዩ ላይ ያለውን ዩአርኤል መቀየር እና ኢንክሪፕት ማድረግ እና ከዚያ አንዳንድ ተለዋዋጭ መለኪያዎች እዚህ መላክ ይፈልጋሉ።

ይህ ምን መደምደሚያ ይጠቁማል? በእኛ ሁኔታ, ሲዲኤን በጣም ጥሩ አማራጭ አይደለም.

እና በእርስዎ ሁኔታ ፣ ማንኛውም ልዩ የንግድ መስፈርቶች ካሉዎት ፣ እኔ እራስዎ ያሳየሁትን በቀላሉ መተግበር ይችላሉ። እና ይሄ ከተመሳሳይ የጭነት መገለጫ ጋር በትክክል ይሰራል.

ነገር ግን አንድ ዓይነት አጠቃላይ መፍትሄ ካሎት እና ስራው በጣም የተለየ ካልሆነ, ሲዲኤን በደህና መውሰድ ይችላሉ. ወይም ጊዜ እና ሀብቶች ከቁጥጥር በላይ ለእርስዎ አስፈላጊ ከሆኑ።

እና የዘመናችን ሲዲኤን አሁን የነገርኳችሁን ሁሉ አሏቸው። ከፕላስ ወይም ከተቀነሰ አንዳንድ ባህሪያት በስተቀር።

ይህ ፎቶዎችን ስለመስጠት ነው።

አሁን በሃሳባችን ውስጥ ትንሽ ወደፊት እንሂድ እና ስለ ማከማቻ እንነጋገር።

2013 እያለፈ ነበር።

መሸጎጫ አገልጋዮች ታክለዋል፣ የአፈጻጸም ችግሮች ጠፉ። ሁሉ ነገር ጥሩ ነው. የውሂብ ስብስብ እያደገ ነው። ከ2013 ጀምሮ፣ ከማከማቻ ጋር የተገናኙ 80 የሚያህሉ አገልጋዮች፣ እና በእያንዳንዱ ዲሲ ውስጥ 40 የሚጠጉ መሸጎጫዎች ነበሩን። ይህ በእያንዳንዱ ዲሲ ላይ 560 ቴራባይት ውሂብ ነው, ማለትም. በጠቅላላው ስለ ፔታባይት.

እና በመረጃ ስብስብ እድገት ፣ የሥራ ማስኬጃ ወጪዎች በከፍተኛ ሁኔታ መጨመር ጀመሩ። ይህ ምን ማለት ነው?

በዚህ ሥዕላዊ መግለጫው ውስጥ - ከ SAN ጋር ፣ ከማሽኖች እና መሸጎጫዎች ጋር የተገናኙ - ብዙ ውድቀቶች አሉ። ቀደም ሲል የአገልጋዮችን መሸጎጫ አለመሳካት አስቀድመን ከተነጋገርን ፣ ሁሉም ነገር የበለጠ ወይም ያነሰ ሊተነበይ የሚችል እና ለመረዳት የሚቻል ነበር ፣ ግን በማከማቻው በኩል ሁሉም ነገር በጣም የከፋ ነበር።

በመጀመሪያ፣ የማከማቻ አካባቢ አውታረ መረብ (SAN) ራሱ፣ ሊሳካ ይችላል።

በሁለተኛ ደረጃ, በኦፕቲክስ በኩል ከጫፍ ማሽኖች ጋር ተያይዟል. በኦፕቲካል ካርዶች እና ሻማዎች ላይ ችግሮች ሊኖሩ ይችላሉ.

እርግጥ ነው፣ እንደ SAN ራሱ ብዙዎቹ የሉም፣ ግን፣ ሆኖም፣ እነዚህም የውድቀት ነጥቦች ናቸው።

ቀጥሎ ማሽኑ ራሱ ነው, እሱም ከማከማቻው ጋር የተገናኘ. ሊወድቅም ይችላል።

በአጠቃላይ ሶስት የውድቀት ነጥቦች አሉን።

በተጨማሪም ፣ ከተሰናከሉ ነጥቦች በተጨማሪ ፣ ማከማቻው ራሱ ከባድ ጥገና አለ።

ይህ ውስብስብ ባለብዙ-አካላት ስርዓት ነው, እና የስርዓት መሐንዲሶች ከእሱ ጋር ለመስራት አስቸጋሪ ሊሆኑ ይችላሉ.

እና የመጨረሻው, በጣም አስፈላጊው ነጥብ. ከእነዚህ ሶስት ነጥቦች በአንዱ ላይ ብልሽት ከተከሰተ፣ የፋይል ስርዓቱ ሊበላሽ ስለሚችል የተጠቃሚ ውሂብ የማጣት ዜሮ ያልሆነ እድል አለን።

የፋይል ስርዓታችን ተበላሽቷል እንበል። በመጀመሪያ ፣ መልሶ ማግኘቱ ብዙ ጊዜ ይወስዳል - ብዙ መጠን ያለው መረጃ የያዘ ሳምንት ሊወስድ ይችላል። በሁለተኛ ደረጃ ፣ በመጨረሻ ፣ እኛ ምናልባት ወደ የተጠቃሚ ፎቶዎች በሆነ መንገድ ሊጣመሩ በሚችሉ ብዙ ለመረዳት የማይችሉ ፋይሎችን እንጨርሳለን። እና ውሂብ የማጣት ስጋት አለብን። አደጋው በጣም ከፍተኛ ነው። እና ብዙ ጊዜ እንደዚህ ያሉ ሁኔታዎች ይከሰታሉ, እና በዚህ ሰንሰለት ውስጥ ብዙ ችግሮች ይነሳሉ, ይህ አደጋ ከፍ ያለ ይሆናል.

በዚህ ላይ አንድ ነገር መደረግ ነበረበት. እና ውሂቡን ምትኬ ማስቀመጥ ብቻ እንዳለብን ወስነናል። ይህ በእርግጥ ግልጽ እና ጥሩ መፍትሄ ነው. ምን አደረግን?

አገልጋያችን ከዚህ በፊት ከማከማቻ ጋር ሲገናኝ ይህን ይመስል ነበር። ይህ አንድ ዋና ክፍል ነው፣ እሱ በትክክል በኦፕቲክስ በኩል ለርቀት ማከማቻ ተራራን የሚወክል የማገጃ መሳሪያ ነው።

አሁን ሁለተኛ ክፍል ጨምረናል።

ከእሱ ቀጥሎ ሁለተኛ ማከማቻ አስቀመጥን (እንደ እድል ሆኖ, በገንዘብ ረገድ ያን ያህል ውድ አይደለም), እና የመጠባበቂያ ክፋይ ብለን እንጠራዋለን. በተጨማሪም በኦፕቲክስ በኩል የተገናኘ እና በተመሳሳይ ማሽን ላይ ይገኛል. ግን በመካከላቸው ያለውን ውሂብ እንደምንም ማመሳሰል አለብን።

እዚህ በቀላሉ የማይመሳሰል ወረፋ በአቅራቢያ እንሰራለን።

በጣም ስራ የበዛባት አይደለችም። በቂ መዛግብት እንደሌለን እናውቃለን። ወረፋ በ MySQL ውስጥ እንደ "የዚህን ፎቶ ምትኬ ማስቀመጥ ያስፈልግዎታል" ያሉ መስመሮች የተፃፉበት ጠረጴዛ ብቻ ነው. በማንኛውም ለውጥ ወይም ሰቀላ፣ አልተመሳሰልን ወይም የሆነ የጀርባ ሰራተኛን በመጠቀም ከዋናው ክፍልፍል ወደ ምትኬ እንቀዳለን።

እና ስለዚህ ሁል ጊዜ ሁለት ወጥ ክፍሎች አሉን። ምንም እንኳን የዚህ ስርዓት አንድ አካል ቢወድቅ እንኳን, ሁልጊዜ ዋናውን ክፍልፍል በመጠባበቂያ መለወጥ እንችላለን, እና ሁሉም ነገር መስራቱን ይቀጥላል.

ነገር ግን በዚህ ምክንያት የንባብ ሸክሙ በጣም ይጨምራል, ምክንያቱም ... ከዋናው ክፍል ከሚያነቡ ደንበኞች በተጨማሪ ፣ ምክንያቱም በመጀመሪያ እዚያ ያለውን ፎቶ ስለሚመለከቱ (እዚያ የበለጠ የቅርብ ጊዜ ነው) እና ከዚያ በመጠባበቂያው ላይ ይፈልጉት ፣ ካላገኙት (ግን NGINX ይህንን ብቻ ያደርገዋል) የእኛ ስርዓት በተጨማሪ የመጠባበቂያ ቅጂ አሁን ከዋናው ክፍልፋይ ይነበባል. ይህ ማነቆ ነበር ማለት አይደለም, ነገር ግን ጭነቱን መጨመር አልፈልግም, በመሠረቱ, ልክ እንደዛው.

እና ትንሽ ኤስኤስዲ የሆነ ሶስተኛ ዲስክ ጨምረናል እና ቋት ብለን ጠራን።

አሁን እንዴት እንደሚሰራ።

ተጠቃሚው ፎቶን ወደ ቋት ይሰቅላል፣ከዚያ አንድ ክስተት ወደ ወረፋው ይጣላል፣ ይህም በሁለት ክፍሎች መቅዳት እንዳለበት ያሳያል። ተገልብጧል እና ፎቶው ለተወሰነ ጊዜ በመጠባበቂያው ላይ ይኖራል (አንድ ቀን ይበሉ) እና ከዚያ በኋላ ብቻ ከዚያ ይጸዳል። ይሄ የተጠቃሚውን ልምድ በእጅጉ ያሻሽላል, ምክንያቱም ተጠቃሚው ፎቶን ይሰቅላል, እንደ ደንቡ, ጥያቄዎች ወዲያውኑ መከተል ይጀምራሉ, ወይም እሱ ራሱ ገጹን አዘምኗል እና አድሶታል. ነገር ግን ሁሉም ነገር ሰቀላውን በሚያደርገው መተግበሪያ ላይ የተመሰረተ ነው.

ወይም ለምሳሌ, እራሱን ማሳየት የጀመረባቸው ሌሎች ሰዎች ከዚህ ፎቶ በኋላ ወዲያውኑ ጥያቄዎችን ይልካሉ. ገና በመሸጎጫው ውስጥ የለም, የመጀመሪያው ጥያቄ በጣም በፍጥነት ይከሰታል. በመሠረቱ ከፎቶ መሸጎጫ ጋር ተመሳሳይ ነው። ቀርፋፋ ማከማቻ በጭራሽ በዚህ ውስጥ አይሳተፍም። እና ከአንድ ቀን በኋላ ሲጸዳ፣ አስቀድሞ ወይ በመሸጎጫ ንብርባችን ላይ ተከማችቷል፣ ወይም ምናልባትም፣ ማንም ከእንግዲህ አያስፈልገውም። እነዚያ። በእንደዚህ አይነት ቀላል ማጭበርበሮች ምክንያት እዚህ ያለው የተጠቃሚ ተሞክሮ በጣም ጥሩ አድጓል።

ደህና, እና ከሁሉም በላይ አስፈላጊ: ውሂብ ማጣት አቆምን.

አቁመናል እንበል የሚችል ውሂብን አጥፉ፣ ምክንያቱም በትክክል አላጣነውም። ግን አደጋ ነበር። ይህ መፍትሔ በእርግጥ ጥሩ እንደሆነ እናያለን, ነገር ግን ሙሉ በሙሉ ከመፍታት ይልቅ የችግሩን ምልክቶች እንደ ማለስለስ ትንሽ ነው. እና አንዳንድ ችግሮች እዚህ ይቀራሉ.

በመጀመሪያ፣ ይህ ሁሉ ማሽነሪ የሚሠራበት በአካላዊ አስተናጋጅ መልክ የውድቀት ነጥብ ነው፣ አልሄደም።

በሁለተኛ ደረጃ, አሁንም በ SANs ላይ ችግሮች አሉ, ከባድ ጥገናቸው, ወዘተ. እሱ ወሳኝ ምክንያት አይደለም ፣ ግን ያለ እሱ በሆነ መንገድ ለመኖር መሞከር ፈለግሁ።

እና ሶስተኛውን ስሪት (በእውነቱ, ሁለተኛው በእውነቱ) - የቦታ ማስያዣውን ስሪት አደረግን. ምን ይመስል ነበር?

ይህ ነበር -

ዋናው ችግሮቻችን ይህ አካላዊ አስተናጋጅ ነው.

በመጀመሪያ፣ መሞከር ስለምንፈልግ SANsን እያስወገድን ነው፣ የአካባቢ ሃርድ ድራይቭን ብቻ መሞከር እንፈልጋለን።

ይህ ቀድሞውኑ 2014-2015 ነው, እና በዚያን ጊዜ በዲስኮች ሁኔታ እና በአንድ አስተናጋጅ ውስጥ ያለው አቅም በጣም የተሻለ ነበር. ለምን እንደማንሞክር ወስነናል።

እና ከዚያ በቀላሉ የመጠባበቂያ ክፍላችንን ወስደን በአካል ወደተለየ ማሽን እናስተላልፋለን።

ስለዚህ, ይህንን ንድፍ እናገኛለን. ተመሳሳይ የውሂብ ስብስቦችን የሚያከማቹ ሁለት መኪኖች አሉን. እርስ በርሳቸው ሙሉ በሙሉ ይደግፋሉ እና በተመሳሳዩ MySQL ውስጥ ባልተመሳሰል ወረፋ አማካኝነት በአውታረ መረቡ ላይ ውሂብ ያመሳስላሉ.

ለምን ይህ በጥሩ ሁኔታ የሚሰራው ጥቂት መዝገቦች ስላሉን ነው። እነዚያ። መፃፍ ከማንበብ ጋር የሚወዳደር ቢሆን ምናልባት የሆነ የኔትወርክ ሽፋን እና ችግሮች ይኖሩን ነበር። ትንሽ መጻፍ, ብዙ ማንበብ - ይህ ዘዴ በደንብ ይሰራል, ማለትም. በእነዚህ ሁለት አገልጋዮች መካከል ፎቶዎችን የምንገለብጥበት ጊዜ የለም።

ይህ እንዴት እንደሚሰራ, ትንሽ በዝርዝር ከተመለከቱ.

ስቀል ሚዛኑ በቀላሉ የዘፈቀደ አስተናጋጆችን ከአንድ ጥንድ ጋር መርጦ ይሰቀልበታል። በተመሳሳይ ጊዜ, በተፈጥሮ ጤናን ይቆጣጠራል እና መኪናው እንደማይወድቅ ያረጋግጣል. እነዚያ። ፎቶዎችን ወደ ቀጥታ አገልጋይ ብቻ ይሰቅላል እና ከዚያ ባልተመሳሰል ወረፋ ሁሉም ወደ ጎረቤቱ ይገለበጣል። በመስቀል ላይ ሁሉም ነገር በጣም ቀላል ነው።

ስራው ትንሽ የበለጠ ከባድ ነው.

ሉአ እዚህ ረድቶናል፣ ምክንያቱም በቫኒላ NGINX ላይ እንደዚህ ያለ አመክንዮ ለመስራት አስቸጋሪ ሊሆን ይችላል። በመጀመሪያ ለመጀመሪያው አገልጋይ እንጠይቃለን ፣ ፎቶው እንዳለ ይመልከቱ ፣ ምክንያቱም ሊሰቀል ይችላል ፣ ለምሳሌ ወደ ጎረቤት ፣ ግን እዚህ ገና አልደረሰም። ፎቶው ካለ ጥሩ ነው። ወዲያውኑ ለደንበኛው እንሰጣለን እና, ምናልባትም, መሸጎጫ.

እዚያ ከሌለ በቀላሉ ለጎረቤታችን ጥያቄ እናቀርባለን እና ከዚያ ለመቀበል ዋስትና እንሰጣለን.

ያ። እንደገና ማለት እንችላለን-በአፈፃፀም ላይ ችግሮች ሊኖሩ ይችላሉ ፣ ምክንያቱም የማያቋርጥ የዙር ጉዞዎች አሉ - ፎቶው ተሰቅሏል ፣ እዚህ የለም ፣ ከአንድ ይልቅ ሁለት ጥያቄዎችን እያቀረብን ነው ፣ ይህ በቀስታ መሥራት አለበት።

በእኛ ሁኔታ, ይህ ቀስ በቀስ አይሰራም.

በዚህ ስርዓት ላይ ብዙ ልኬቶችን እንሰበስባለን ፣ እና የእንደዚህ ዓይነቱ ዘዴ ሁኔታዊ ብልጥ ፍጥነት 95% ያህል ነው። እነዚያ። የዚህ መጠባበቂያ መዘግየት ትንሽ ነው, እና በዚህ ምክንያት ዋስትና እንሰጣለን, ፎቶው ከተሰቀለ በኋላ, ለመጀመሪያ ጊዜ እንወስዳለን እና ሁለት ጊዜ የትም መሄድ አያስፈልገንም.

ታዲያ ሌላ ምን አግኝተናል በጣም አሪፍ ነው?

ቀደም ሲል, ዋናው የመጠባበቂያ ክፋይ ነበረን, እና ከእነሱ በቅደም ተከተል እናነባለን. እነዚያ። እኛ ሁልጊዜ በመጀመሪያ ዋናውን እና ከዚያም በመጠባበቂያው ላይ ፈልገን ነበር. አንድ እርምጃ ነበር።

አሁን ከሁለት ማሽኖች ንባብን በአንድ ጊዜ እንጠቀማለን. Round Robinን በመጠቀም ጥያቄዎችን እናሰራጫለን። በትንሽ መቶኛ ጉዳዮች ሁለት ጥያቄዎችን እናቀርባለን። በአጠቃላይ ግን አሁን ከአሁን በፊት ከነበረን በእጥፍ የሚበልጥ የንባብ ክምችት አለን። እና ጭነቱ በላኪ ማሽኖችም ሆነ በቀጥታ በማጠራቀሚያ ማሽኖች ላይ በጣም ቀንሷል፣ እኛም በዚያን ጊዜ ነበረን።

ስለ ስህተት መቻቻል። በዋነኛነት የታገልነው ለዚህ ነው። በስህተት መቻቻል ፣ ሁሉም ነገር እዚህ ጥሩ ሆነ።

አንድ መኪና ተበላሽቷል።

ችግር የሌም! የስርዓት መሐንዲስ በምሽት እንኳን ላይነሳ ይችላል, እስከ ጠዋት ድረስ ይጠብቃል, ምንም መጥፎ ነገር አይከሰትም.

ምንም እንኳን ይህ ማሽን ባይሳካም, ወረፋው ከስራ ውጭ ነው, ምንም ችግሮች የሉም, ምዝግብ ማስታወሻው በቀላሉ በመጀመሪያ በህያው ማሽን ላይ ይከማቻል, ከዚያም ወደ ወረፋው ይጨመራል, ከዚያም ወደ መኪናው ይሄዳል. ከተወሰነ ጊዜ በኋላ ወደ ሥራ ይሂዱ.

ከጥገና ጋር ተመሳሳይ ነገር. ከማሽኖቹ ውስጥ አንዱን በቀላሉ እናጠፋለን, ከሁሉም ገንዳዎች ውስጥ በእጅ አውጥተነዋል, ትራፊክ መቀበል ያቆማል, አንዳንድ ጥገናዎችን እንሰራለን, የሆነ ነገር እናስተካክላለን, ከዚያም ወደ አገልግሎት እንመለሳለን, እና ይህ ምትኬ በፍጥነት ይይዛል. እነዚያ። በቀን፣ የአንድ መኪና የእረፍት ጊዜ በጥቂት ደቂቃዎች ውስጥ ይደርሳል። ይህ በእርግጥ በጣም ትንሽ ነው. በስህተት መቻቻል ፣ እንደገና እላለሁ ፣ ሁሉም ነገር እዚህ ጥሩ ነው።

ከዚህ የመቀየሪያ እቅድ ምን መደምደሚያዎች ሊገኙ ይችላሉ?

ስህተት መቻቻል አግኝተናል።

ለመጠቀም ቀላል። ማሽኖቹ የሃገር ውስጥ ሃርድ ድራይቭ ስላላቸው ይህ ከእሱ ጋር ለሚሰሩ መሐንዲሶች ከተግባራዊ እይታ አንጻር ሲታይ በጣም ምቹ ነው.

ድርብ የማንበብ አበል ተቀበልን።

ይህ ከስህተት መቻቻል በተጨማሪ በጣም ጥሩ ጉርሻ ነው።

ግን ችግሮችም አሉ. አሁን ከዚህ ጋር የተያያዙ አንዳንድ ባህሪያት በጣም የተወሳሰበ እድገት አለን, ምክንያቱም ስርዓቱ በመጨረሻ 100% ወጥነት ያለው ሆኗል.

በአንዳንድ የዳራ ሥራ ውስጥ፣ “አሁን የምንሠራው በምን አገልጋይ ላይ ነው?”፣ “በእርግጥ አሁን ያለው ፎቶ እዚህ አለ?” ብለን ዘወትር ማሰብ አለብን። ወዘተ. ይህ እርግጥ ነው, ሁሉም የተጠቀለለ ነው, እና የቢዝነስ ሎጂክን ለሚጽፍ ፕሮግራመር, ግልጽ ነው. ነገር ግን, ቢሆንም, ይህ ትልቅ ውስብስብ ንብርብር ታየ. እኛ ግን ያገኘነውን መልካም ነገር ለመሸከም ዝግጁ ነን።

እና እዚህ እንደገና አንዳንድ ግጭቶች ይነሳሉ.

መጀመሪያ ላይ ሁሉንም ነገር በአካባቢያዊ ሃርድ ድራይቮች ላይ ማከማቸት መጥፎ ነው አልኩኝ። እና አሁን ወደድነው እላለሁ።

አዎን, በእርግጥ, ከጊዜ በኋላ ሁኔታው ​​በጣም ተለውጧል, እና አሁን ይህ አቀራረብ ብዙ ጥቅሞች አሉት. በመጀመሪያ ደረጃ, በጣም ቀላል ቀዶ ጥገና እናገኛለን.

በሁለተኛ ደረጃ, የበለጠ ፍሬያማ ነው, ምክንያቱም እነዚህ አውቶማቲክ መቆጣጠሪያዎች ወይም ከዲስክ መደርደሪያዎች ጋር ግንኙነት ስለሌለን.

በጣም ብዙ መጠን ያለው ማሽነሪ አለ፣ እና እነዚህ ጥቂት ዲስኮች በማሽኑ ላይ ወደ ወረራ የሚሰበሰቡ ናቸው።

ግን ጉዳቶችም አሉ.

ይህ ዛሬ ባሉት ዋጋዎች እንኳን SANዎችን ከመጠቀም በግምት 1,5 እጥፍ የበለጠ ውድ ነው። ስለዚህ፣ አጠቃላይ ክፍላችንን በድፍረት ወደ መኪኖች ላለመቀየር ወስነን የሃርድ ድራይቮች እና ድብልቅ መፍትሄ ለመተው ወሰንን።

ግማሾቹ ማሽኖቻችን በሃርድ ድራይቮች (ደህና, ግማሽ ሳይሆን - ምናልባት 30 በመቶ) ይሰራሉ. የተቀሩት ደግሞ የመጀመሪያውን የቦታ ማስያዣ ዘዴ የያዙ አሮጌ መኪኖች ናቸው። አዲስ መረጃ ወይም ሌላ ነገር ስለማያስፈልገን በቀላሉ እንደገና ጫንናቸው።

እና አሁን ትልቅ የንባብ ክምችት አለን, እና አሰፋነው. ቀደም ሲል አንድ ማከማቻ በአንድ ማሽን ላይ ከጫንን አሁን አራት እንሰቅላለን ለምሳሌ በአንድ ጥንድ ላይ። እና በጥሩ ሁኔታ ይሰራል.

ያሳካነውን፣ የታገልነውን እና የተሳካልንበትን ነገር በአጭሩ እናንሳ።

ውጤቶች

ተጠቃሚዎች አሉን - እስከ 33 ሚሊዮን።

ሶስት የመገኛ ቦታ አለን - ፕራግ ፣ ማያሚ ፣ ሆንግ ኮንግ።

መሸጎጫ ንብርብር ይይዛሉ፣ይህም ፈጣን የአካባቢ ዲስኮች (ኤስኤስዲዎች) ያላቸው መኪኖችን ያቀፈ ነው፣ በዚህ ላይ ቀላል ማሽነሪዎች ከ NGINX፣ access.log እና Python daemons የሚሄዱት፣ ይህን ሁሉ የሚያስኬድ እና መሸጎጫውን የሚያስተዳድር።

ከፈለጉ፣ በፕሮጀክትዎ ውስጥ ነዎት፣ ፎቶዎች ለእኛ እንደሚሉት ለእርስዎ ወሳኝ ካልሆኑ፣ ወይም የንግድ ልውውጥ ቁጥጥር እና የእድገት ፍጥነት እና የንብረት ወጪዎች ለእርስዎ በሌላ አቅጣጫ ከሆነ ፣ ከዚያ በደህና መተካት ይችላሉ። ከሲዲኤን ጋር፣ ዘመናዊ ሲዲኤን ጥሩ እየሰሩ ነው።

ቀጥሎ የሚመጣው የማጠራቀሚያ ንብርብር ነው፣ እሱም እርስ በርስ የሚደጋገፉ ጥንድ ጥንድ ማሽኖች ያሉንበት፣ ፋይሎቹ በተቀየሩ ቁጥር ከአንዱ ወደ ሌላው በተመሳሳይ መልኩ ይገለበጣሉ።

ከዚህም በላይ ከእነዚህ ማሽኖች ውስጥ አንዳንዶቹ ከአካባቢው ሃርድ ድራይቭ ጋር ይሠራሉ.

ከእነዚህ ማሽኖች አንዳንዶቹ ከSANs ጋር የተገናኙ ናቸው።

እና, በአንድ በኩል, ለመጠቀም የበለጠ አመቺ እና ትንሽ የበለጠ ምርታማ ነው, በሌላ በኩል, በምደባ ጥግግት እና በአንድ ጊጋባይት ዋጋ ላይ ምቹ ነው.

ይህ እኛ ያገኘነውን እና ሁሉም እንዴት እንደዳበረ ስለ አርክቴክቸር አጭር መግለጫ ነው።

ከካፒቴኑ ጥቂት ተጨማሪ ምክሮች, በጣም ቀላል.

በመጀመሪያ, በድንገት በፎቶዎ መሠረተ ልማት ውስጥ ያሉትን ሁሉንም ነገሮች በአስቸኳይ ማሻሻል እንዳለብዎ ከወሰኑ በመጀመሪያ ይለኩ, ምክንያቱም ምናልባት ምንም መሻሻል አያስፈልገውም.

አንድ ምሳሌ ልስጥህ። በቻት ውስጥ ከአባሪዎች ፎቶዎችን የሚልክ የማሽኖች ስብስብ አለን ፣ እና እቅዱ ከ 2009 ጀምሮ እዚያ እየሰራ ነው ፣ እና ማንም በዚህ አይሰቃይም። ሁሉም ሰው ደህና ነው, ሁሉም ሰው ሁሉንም ነገር ይወዳል.

ለመለካት መጀመሪያ ብዙ መለኪያዎችን አንጠልጥሉ፣ ተመልከቷቸው፣ እና ምን ያልተደሰቱበትን እና ምን መሻሻል እንዳለበት ይወስኑ። ይህንን ለመለካት, ፒንባ የሚባል አሪፍ መሳሪያ አለን.

ለእያንዳንዱ ጥያቄ እና ምላሽ ኮድ ከ NGINX በጣም ዝርዝር የሆነ ስታቲስቲክስን እንዲሰበስቡ ይፈቅድልዎታል ፣ እና የጊዜ ስርጭት - የሚፈልጉትን። ከሁሉም አይነት የተለያዩ የትንታኔ ስርዓቶች ጋር ትስስር አለው, እና ከዚያ ሁሉንም በሚያምር ሁኔታ ማየት ይችላሉ.

መጀመሪያ ለካነው፣ ከዚያ አሻሽለነዋል።

ተጨማሪ። ንባብን በመሸጎጫ፣ በሻርዲንግ መፃፍ እናመቻቻለን ግን ይህ ግልጽ ነጥብ ነው።

ተጨማሪ። አሁን ስርዓትዎን መገንባት ከጀመሩ ፎቶዎችን እንደ የማይለዋወጡ ፋይሎች መስራት በጣም የተሻለ ነው። ምክንያቱም ወዲያውኑ የመሸጎጫ መጓደል ፣ አመክንዮው ትክክለኛውን የፎቶውን እትም እንዴት ማግኘት እንዳለበት ፣ እና የመሳሰሉትን አጠቃላይ ችግሮች ያጣሉ ።

አንድ መቶ ሰቅለሃል እንበል፣ ከዚያ አሽከርክረው፣ በአካል የተለየ ፋይል እንዲሆን አድርገህ። እነዚያ። ማሰብ አያስፈልግም: አሁን ትንሽ ቦታ አስቀምጫለሁ, ወደ ተመሳሳይ ፋይል ጻፍ, ስሪቱን ቀይር. ይህ ሁልጊዜ በደንብ አይሰራም እና በኋላ ላይ ብዙ ራስ ምታት ያስከትላል.

ቀጣይ ነጥብ. በበረራ ላይ ስለመጠን መቀየር.

ከዚህ ቀደም ተጠቃሚዎች ፎቶን ሲሰቅሉ ወዲያውኑ ለሁሉም አጋጣሚዎች, ለተለያዩ ደንበኞች አንድ ሙሉ መጠን እንቆርጣለን እና ሁሉም በዲስክ ላይ ነበሩ. አሁን ይህንን ትተናል።

ሦስት ዋና ዋና መጠኖችን ብቻ ትተናል: ትንሽ, መካከለኛ እና ትልቅ. በቀላሉ በ Uport ከተጠየቅን በኋላ ካለው መጠን ሁሉንም ነገር ዝቅ እናደርጋለን ፣ በቀላሉ ዝቅ ብለን ለተጠቃሚው እንሰጣለን ።

በእያንዳንዱ ማከማቻ ላይ እነዚህን መጠኖች በየጊዜው ካደስናቸው የመሸጎጫ ንብርብር ሲፒዩ እዚህ በጣም ርካሽ ሆኖ ተገኝቷል። አዲስ ማከል እንፈልጋለን እንበል ፣ ይህ አንድ ወር ይወስዳል - ስክሪፕቱን በየቦታው ያሂዱ ፣ ይህንን ሁሉ በጥሩ ሁኔታ የሚሠራ ፣ ክላስተር ሳያጠፉ። እነዚያ። አሁን የመምረጥ እድል ካሎት, በተቻለ መጠን ጥቂት አካላዊ መጠኖችን ማድረግ የተሻለ ነው, ነገር ግን ቢያንስ የተወሰነ ስርጭት, ለምሳሌ, ሶስት. እና ሁሉም ነገር በቀላሉ ዝግጁ የሆኑ ሞጁሎችን በመጠቀም በበረራ ላይ መጠኑ ሊቀየር ይችላል። አሁን ሁሉም ነገር በጣም ቀላል እና ተደራሽ ነው።

እና ተጨማሪ ያልተመሳሰል ምትኬ ጥሩ ነው።

ልምዳችን እንደሚያሳየው፣ ይህ እቅድ ከተቀየሩ ፋይሎች ዘግይቶ በመቅዳት ጥሩ ይሰራል።

የመጨረሻው ነጥብም ግልጽ ነው. የእርስዎ መሠረተ ልማት አሁን እንደዚህ አይነት ችግሮች ከሌለው ነገር ግን ሊሰበር የሚችል ነገር ካለ በእርግጠኝነት ትንሽ ሲጨምር ይሰበራል. ስለዚህ, ስለዚህ ጉዳይ አስቀድመው ማሰብ እና ከእሱ ጋር ችግር ላለማድረግ የተሻለ ነው. ይህን ነው ለማለት የፈለኩት።

እውቂያዎች

» bo0rsh201
» ባዱ ብሎግ

ይህ ሪፖርት በከፍተኛ ጭነት ስርዓት ገንቢዎች ኮንፈረንስ ላይ ካሉት ምርጥ ንግግሮች አንዱ ግልባጭ ነው። HighLoad ++. የHighLoad++ 2017 ኮንፈረንስ ሊጠናቀቅ ከአንድ ወር ያነሰ ጊዜ ቀርቷል።

አስቀድመን አዘጋጅተናል የኮንፈረንስ ፕሮግራም, መርሃግብሩ አሁን በንቃት እየተቀረጸ ነው.

በዚህ አመት የስነ-ህንፃ እና የመለኪያ ርዕስን ማሰስ እንቀጥላለን፡-

• አንድ ቢሊዮን ተጠቃሚዎችን እንዴት ማገልገል እና የትራፊኩን ትርኢት ማቅረብ እንደሚቻል / Igor Vasiliev
• የ VKontakte የግል መልእክቶችን ዳታቤዝ ከባዶ እንዴት እንደገና መፃፍ እና ያለማቋረጥ ወደ እሱ እንደሚሰደድ / ዲሚትሪ Egorov
• ሞት በሽያጭ፡ Yandex.Money ወደ ጥቁር ዓርብ ለማፋጠን እና ለመትረፍ እንዴት እንደሞከረ / አናቶሊ ፕላስኮቭስኪ
• የባንኩ የፊት-መጨረሻ ስርዓት ስህተት-የሚታገስ አርክቴክቸር / ሮማን Shekhovtsov, Alexey Gromatchikov
• የክፍያ ሥርዓት አርክቴክቸር: ማለት ይቻላል ድርጅት / ፊሊፕ ዴልጋዶ

ከፍተኛ ጭነት የሚጫኑ ሲስተሞችን በማዘጋጀት ላይ ባለው የመስመር ላይ የስልጠና ኮርስ ላይ ከእነዚህ ቁሳቁሶች አንዳንዶቹን እንጠቀማለን። HighLoad.መመሪያ ልዩ የተመረጡ ፊደሎች፣ መጣጥፎች፣ ቁሳቁሶች፣ ቪዲዮዎች ሰንሰለት ነው። የመማሪያ መጽሐፋችን አስቀድሞ ከ30 በላይ ልዩ ቁሳቁሶችን ይዟል። ተገናኝ!

ምንጭ: hab.com