ന്യൂ ജനറേഷൻ ബില്ലിംഗ് ആർക്കിടെക്ചർ: ടാരന്റൂളിലേക്കുള്ള പരിവർത്തനം

MegaFon പോലുള്ള ഒരു കോർപ്പറേഷന് ബില്ലിംഗിൽ Tarantool ആവശ്യമായി വരുന്നത് എന്തുകൊണ്ട്? പുറത്ത് നിന്ന് നോക്കുമ്പോൾ, വെണ്ടർ സാധാരണയായി വരുന്നു, ഒരുതരം വലിയ പെട്ടി കൊണ്ടുവരുന്നു, സോക്കറ്റിൽ പ്ലഗ് പ്ലഗ് ചെയ്യുന്നു - അതാണ് ബില്ലിംഗ്! ഒരു കാലത്ത് ഇത് അങ്ങനെയായിരുന്നു, എന്നാൽ ഇപ്പോൾ ഇത് പുരാതനമാണ്, അത്തരം ദിനോസറുകൾ ഇതിനകം തന്നെ വംശനാശം സംഭവിച്ചു അല്ലെങ്കിൽ വംശനാശം സംഭവിച്ചുകൊണ്ടിരിക്കുന്നു. തുടക്കത്തിൽ, ബില്ലിംഗ് എന്നത് ഇൻവോയ്സുകൾ നൽകുന്നതിനുള്ള ഒരു സംവിധാനമാണ് - ഒരു കൗണ്ടിംഗ് മെഷീൻ അല്ലെങ്കിൽ കാൽക്കുലേറ്റർ. ആധുനിക ടെലികോമുകളിൽ ഇത് ഒരു കരാറിന്റെ സമാപനം മുതൽ അവസാനിപ്പിക്കുന്നത് വരെയുള്ള ഒരു വരിക്കാരനുമായുള്ള ആശയവിനിമയത്തിന്റെ മുഴുവൻ ജീവിത ചക്രത്തിനും ഓട്ടോമേഷൻ സിസ്റ്റം, തത്സമയ ബില്ലിംഗ്, പേയ്‌മെന്റ് സ്വീകാര്യത എന്നിവയും അതിലേറെയും ഉൾപ്പെടെ. ടെലികോം കമ്പനികളിലെ ബില്ലിംഗ് ഒരു യുദ്ധ റോബോട്ട് പോലെയാണ് - വലുതും ശക്തവും ആയുധങ്ങൾ നിറഞ്ഞതുമാണ്.

ടാരന്തൂളിന് ഇതുമായി എന്ത് ബന്ധമുണ്ട്? അവർ അതിനെക്കുറിച്ച് സംസാരിക്കും ഒലെഗ് ഇവ്ലേവ് и ആൻഡ്രി ക്നാസേവ്. ഒലെഗ് ആണ് കമ്പനിയുടെ ചീഫ് ആർക്കിടെക്റ്റ് മെഗാഫോൺ с огромным опытом работы в зарубежных компаниях, Андрей — директор по бизнес-системам. Из расшифровки их доклада на Tarantool Conference 2018 കോർപ്പറേഷനുകളിൽ R&D ആവശ്യമായിരിക്കുന്നത് എന്തുകൊണ്ട്, ടാരന്റൂൾ എന്താണ്, വെർട്ടിക്കൽ സ്കെയിലിംഗിന്റെയും ആഗോളവൽക്കരണത്തിന്റെയും തടസ്സം കമ്പനിയിൽ ഈ ഡാറ്റാബേസ് പ്രത്യക്ഷപ്പെടുന്നതിന് എങ്ങനെ മുൻവ്യവസ്ഥകളായിത്തീർന്നു, സാങ്കേതിക വെല്ലുവിളികൾ, വാസ്തുവിദ്യാ പരിവർത്തനം, മെഗാഫോണിന്റെ ടെക്നോസ്റ്റാക്ക് എങ്ങനെ നെറ്റ്ഫ്ലിക്സിന് സമാനമാണ് എന്നിവയെക്കുറിച്ച് നിങ്ങൾ പഠിക്കും. , ഗൂഗിളും ആമസോണും.

പ്രോജക്റ്റ് "ഏകീകൃത ബില്ലിംഗ്"

സംശയാസ്പദമായ പ്രോജക്റ്റിന്റെ പേര് "യൂണിഫൈഡ് ബില്ലിംഗ്" എന്നാണ്. ഇവിടെയാണ് ടാരന്തൂൾ അതിന്റെ മികച്ച ഗുണങ്ങൾ കാണിച്ചത്.

ഹൈ-എൻഡ് ഉപകരണങ്ങളുടെ ഉൽപ്പാദനക്ഷമതയിലെ വളർച്ച സബ്സ്ക്രൈബർ ബേസിന്റെ വളർച്ചയ്ക്കും സേവനങ്ങളുടെ എണ്ണത്തിലെ വളർച്ചയ്ക്കും അനുസൃതമായിരുന്നില്ല; M2M, IoT, ബ്രാഞ്ച് സവിശേഷതകൾ എന്നിവ കാരണം വരിക്കാരുടെ എണ്ണത്തിലും സേവനങ്ങളിലും കൂടുതൽ വളർച്ച പ്രതീക്ഷിക്കുന്നു. സമയ-വിപണിയിലെ അപചയത്തിലേക്ക്. നിലവിലുള്ള 8 വ്യത്യസ്ത ബില്ലിംഗ് സംവിധാനങ്ങൾക്കുപകരം സവിശേഷമായ ലോകോത്തര മോഡുലാർ ആർക്കിടെക്ചർ ഉപയോഗിച്ച് ഒരു ഏകീകൃത ബിസിനസ്സ് സിസ്റ്റം സൃഷ്ടിക്കാൻ കമ്പനി തീരുമാനിച്ചു.

മെഗാഫോൺ ഒന്നിൽ എട്ട് കമ്പനികളാണ്. 2009-ൽ, പുനഃസംഘടന പൂർത്തിയായി: റഷ്യയിലുടനീളമുള്ള ശാഖകൾ മെഗാഫോൺ OJSC (ഇപ്പോൾ PJSC) എന്ന ഒരൊറ്റ കമ്പനിയായി ലയിച്ചു. അങ്ങനെ, കമ്പനിക്ക് അവരുടെ സ്വന്തം "ഇഷ്‌ടാനുസൃത" പരിഹാരങ്ങൾ, ബ്രാഞ്ച് സവിശേഷതകൾ, വ്യത്യസ്ത സംഘടനാ ഘടനകൾ, ഐടി, മാർക്കറ്റിംഗ് എന്നിവയുള്ള 8 ബില്ലിംഗ് സംവിധാനങ്ങളുണ്ട്.

ഞങ്ങൾക്ക് ഒരു പൊതു ഫെഡറൽ ഉൽപ്പന്നം സമാരംഭിക്കുന്നതുവരെ എല്ലാം ശരിയായിരുന്നു. ഇവിടെ ധാരാളം ബുദ്ധിമുട്ടുകൾ ഉയർന്നു: ചിലർക്ക്, താരിഫുകൾ റൗണ്ട് അപ്പ്, മറ്റുള്ളവർക്ക് റൗണ്ട് ഡൌൺ, മറ്റുള്ളവർക്ക് - ഗണിത ശരാശരിയെ അടിസ്ഥാനമാക്കി. അത്തരം ആയിരക്കണക്കിന് നിമിഷങ്ങളുണ്ട്.

ബില്ലിംഗ് സിസ്റ്റത്തിന്റെ ഒരു പതിപ്പ് മാത്രമേ ഉണ്ടായിരുന്നുള്ളൂ, ഒരു വിതരണക്കാരൻ, ക്രമീകരണങ്ങൾ വളരെയധികം വ്യതിചലിച്ചു, അത് ഒരുമിച്ച് ചേർക്കാൻ വളരെയധികം സമയമെടുത്തു. ഞങ്ങൾ അവരുടെ എണ്ണം കുറയ്ക്കാൻ ശ്രമിച്ചു, പല കോർപ്പറേഷനുകൾക്കും പരിചിതമായ രണ്ടാമത്തെ പ്രശ്നം കണ്ടു.

ലംബ സ്കെയിലിംഗ്. അക്കാലത്തെ ഏറ്റവും മികച്ച ഹാർഡ്‌വെയർ പോലും ആവശ്യങ്ങൾ നിറവേറ്റിയിരുന്നില്ല. സൂപ്പർഡോം ഹൈ-എൻഡ് ലൈനിൽ നിന്നുള്ള ഹ്യൂലറ്റ്-പാക്കാർഡ് ഉപകരണങ്ങൾ ഞങ്ങൾ ഉപയോഗിച്ചു, പക്ഷേ അത് രണ്ട് ശാഖകളുടെ ആവശ്യങ്ങൾ പോലും നിറവേറ്റിയില്ല. വലിയ പ്രവർത്തനച്ചെലവും മൂലധന നിക്ഷേപവും ഇല്ലാതെ തിരശ്ചീനമായ സ്കെയിലിംഗ് എനിക്ക് വേണം.

വരിക്കാരുടെ എണ്ണത്തിലും സേവനങ്ങളിലും വളർച്ച പ്രതീക്ഷിക്കുന്നു. കൺസൾട്ടൻറുകൾ വളരെക്കാലമായി ടെലികോം ലോകത്തേക്ക് IoT, M2M എന്നിവയെക്കുറിച്ചുള്ള കഥകൾ കൊണ്ടുവന്നിട്ടുണ്ട്: ഓരോ ഫോണിലും ഇരുമ്പിലും ഒരു സിം കാർഡും രണ്ടെണ്ണം റഫ്രിജറേറ്ററിൽ ഉള്ള സമയം വരും. ഇന്ന് ഞങ്ങൾക്ക് ഒരു എണ്ണം വരിക്കാരുണ്ട്, എന്നാൽ സമീപഭാവിയിൽ ഇനിയും നിരവധി പേർ ഉണ്ടാകും.

സാങ്കേതിക വെല്ലുവിളികൾ

ഈ നാല് കാരണങ്ങളാണ് ഗുരുതരമായ മാറ്റങ്ങൾ വരുത്താൻ ഞങ്ങളെ പ്രേരിപ്പിച്ചത്. സിസ്റ്റം നവീകരിക്കുന്നതിനും ആദ്യം മുതൽ ഡിസൈൻ ചെയ്യുന്നതിനും ഇടയിൽ ഒരു ചോയ്സ് ഉണ്ടായിരുന്നു. ഞങ്ങൾ വളരെക്കാലം ചിന്തിച്ചു, ഗൗരവമായ തീരുമാനങ്ങൾ എടുത്തു, ടെൻഡർ കളിച്ചു. തൽഫലമായി, ഞങ്ങൾ ആദ്യം മുതൽ രൂപകൽപ്പന ചെയ്യാൻ തീരുമാനിച്ചു, രസകരമായ വെല്ലുവിളികൾ - സാങ്കേതിക വെല്ലുവിളികൾ ഏറ്റെടുക്കുകയും ചെയ്തു.

സ്കേലബിളിറ്റി

Если раньше было, условно скажем, 8 биллингов по 15 млн абонентов, ഇപ്പോൾ അത് പ്രവർത്തിക്കേണ്ടതായിരുന്നു 100 ദശലക്ഷം വരിക്കാരും അതിലധികവും - ലോഡ് എന്നത് ഉയർന്ന അളവിലുള്ള ഒരു ക്രമമാണ്.

Mail.ru അല്ലെങ്കിൽ Netflix പോലുള്ള വലിയ ഇന്റർനെറ്റ് പ്ലെയറുകളുമായി ഞങ്ങൾ താരതമ്യപ്പെടുത്താവുന്നതാണ്.

എന്നാൽ ലോഡും വരിക്കാരുടെ അടിത്തറയും വർധിപ്പിക്കാനുള്ള തുടർന്നുള്ള നീക്കം ഞങ്ങൾക്ക് ഗുരുതരമായ വെല്ലുവിളികൾ സൃഷ്ടിച്ചു.

നമ്മുടെ വിശാലമായ രാജ്യത്തിന്റെ ഭൂമിശാസ്ത്രം

കലിനിൻഗ്രാഡിനും വ്ലാഡിവോസ്റ്റോക്കിനും ഇടയിൽ 7500 км и 10 часовых поясов. പ്രകാശത്തിന്റെ വേഗത പരിമിതമാണ്, അത്തരം ദൂരങ്ങളിൽ കാലതാമസം ഇതിനകം തന്നെ പ്രാധാന്യമർഹിക്കുന്നു. ഏറ്റവും മികച്ച ആധുനിക ഒപ്റ്റിക്കൽ ചാനലുകളിലെ 150 എംഎസ് തത്സമയ ബില്ലിംഗിന് വളരെ കൂടുതലാണ്, പ്രത്യേകിച്ചും ഇപ്പോൾ റഷ്യയിലെ ടെലികോമിൽ. കൂടാതെ, നിങ്ങൾ ഒരു പ്രവൃത്തി ദിവസത്തിൽ അപ്ഡേറ്റ് ചെയ്യേണ്ടതുണ്ട്, വ്യത്യസ്ത സമയ മേഖലകളിൽ ഇത് ഒരു പ്രശ്നമാണ്.

ഞങ്ങൾ ഒരു സബ്‌സ്‌ക്രിപ്‌ഷൻ ഫീസിനായി സേവനങ്ങൾ നൽകുന്നില്ല, ഞങ്ങൾക്ക് സങ്കീർണ്ണമായ താരിഫുകളും പാക്കേജുകളും വിവിധ മോഡിഫയറുകളും ഉണ്ട്. വരിക്കാരനെ സംസാരിക്കാൻ അനുവദിക്കുകയോ നിരസിക്കുകയോ ചെയ്യുക മാത്രമല്ല, അദ്ദേഹത്തിന് ഒരു നിശ്ചിത ക്വാട്ട നൽകുകയും വേണം - കോളുകളും പ്രവർത്തനങ്ങളും തത്സമയം കണക്കാക്കുക, അങ്ങനെ അവൻ ശ്രദ്ധിക്കുന്നില്ല.

തെറ്റ് സഹിഷ്ണുത

ഇത് കേന്ദ്രീകരണത്തിന്റെ മറുവശമാണ്.

ഞങ്ങൾ എല്ലാ സബ്‌സ്‌ക്രൈബർമാരെയും ഒരു സിസ്റ്റത്തിൽ ശേഖരിക്കുകയാണെങ്കിൽ, ഏതെങ്കിലും അടിയന്തര സംഭവങ്ങളും ദുരന്തങ്ങളും ബിസിനസ്സിന് വിനാശകരമാണ്. അതിനാൽ, മുഴുവൻ സബ്‌സ്‌ക്രൈബർ അടിത്തറയിലും അപകടങ്ങളുടെ ആഘാതം ഇല്ലാതാക്കുന്ന തരത്തിലാണ് ഞങ്ങൾ സിസ്റ്റം രൂപകൽപ്പന ചെയ്യുന്നത്.

ഇത് വീണ്ടും ലംബമായി സ്കെയിൽ ചെയ്യാൻ വിസമ്മതിച്ചതിന്റെ അനന്തരഫലമാണ്. ഞങ്ങൾ തിരശ്ചീനമായി സ്കെയിൽ ചെയ്യുമ്പോൾ, ഞങ്ങൾ സെർവറുകളുടെ എണ്ണം നൂറിൽ നിന്ന് ആയിരമായി വർദ്ധിപ്പിച്ചു. അവ കൈകാര്യം ചെയ്യുകയും പരസ്പരം മാറ്റുകയും ചെയ്യേണ്ടതുണ്ട്, ഐടി ഇൻഫ്രാസ്ട്രക്ചറിനെ സ്വയമേവ ബാക്കപ്പ് ചെയ്യുകയും വിതരണം ചെയ്ത സിസ്റ്റം പുനഃസ്ഥാപിക്കുകയും വേണം.

അത്തരം രസകരമായ വെല്ലുവിളികൾ ഞങ്ങൾ നേരിട്ടു. ഞങ്ങൾ സിസ്റ്റം രൂപകൽപ്പന ചെയ്‌തു, ആ നിമിഷം ഞങ്ങൾ എങ്ങനെ പ്രവണതയിലാണെന്നും നൂതന സാങ്കേതികവിദ്യകൾ എത്രത്തോളം പിന്തുടരുന്നുവെന്നും പരിശോധിക്കാൻ ആഗോളതലത്തിൽ മികച്ച രീതികൾ കണ്ടെത്താൻ ഞങ്ങൾ ശ്രമിച്ചു.

ലോകാനുഭവം

Удивительно, но в мировом телекоме мы не нашли ни одного референса.

വരിക്കാരുടെ എണ്ണത്തിലും സ്കെയിലിലും, യുഎസ്എ - അതിന്റെ താരിഫുകളുടെ പരന്നതയുടെ കാര്യത്തിൽ യൂറോപ്പ് വീണുപോയി. ഞങ്ങൾ ചൈനയിലെ ചിലരെ നോക്കി, ചിലത് ഇന്ത്യയിൽ കണ്ടെത്തി, വോഡഫോൺ ഇന്ത്യയിൽ നിന്ന് സ്പെഷ്യലിസ്റ്റുകളെ നിയമിച്ചു.

വാസ്തുവിദ്യ വിശകലനം ചെയ്യാൻ, ഞങ്ങൾ IBM-ന്റെ നേതൃത്വത്തിൽ ഒരു ഡ്രീം ടീമിനെ സംഘടിപ്പിച്ചു - വിവിധ മേഖലകളിൽ നിന്നുള്ള ആർക്കിടെക്റ്റുകൾ. ഈ ആളുകൾക്ക് ഞങ്ങൾ എന്താണ് ചെയ്യുന്നതെന്ന് വേണ്ടത്ര വിലയിരുത്താനും നമ്മുടെ വാസ്തുവിദ്യയിലേക്ക് ചില അറിവുകൾ കൊണ്ടുവരാനും കഴിയും.

സ്കെയിൽ

ചിത്രീകരണത്തിനായി കുറച്ച് അക്കങ്ങൾ.

ഞങ്ങൾ സിസ്റ്റം രൂപകൽപ്പന ചെയ്യുന്നു ഒരു ബില്യൺ കരുതൽ ശേഖരമുള്ള 80 ദശലക്ഷം വരിക്കാർ. ഭാവി പരിധികൾ ഞങ്ങൾ നീക്കം ചെയ്യുന്നത് ഇങ്ങനെയാണ്. ഇത് നമ്മൾ ചൈനയെ ഏറ്റെടുക്കാൻ പോകുന്നതുകൊണ്ടല്ല, മറിച്ച് IoT, M2M എന്നിവയുടെ ആക്രമണം മൂലമാണ്.

300 ദശലക്ഷം ഡോക്യുമെന്റുകൾ തത്സമയം പ്രോസസ്സ് ചെയ്തു. ഞങ്ങൾക്ക് 80 ദശലക്ഷം സബ്‌സ്‌ക്രൈബർമാരുണ്ടെങ്കിലും, ഞങ്ങൾക്ക് ലഭിക്കാവുന്ന തുകകൾ ശേഖരിക്കണമെങ്കിൽ, സാധ്യതയുള്ള ക്ലയന്റുകളുമായും ഞങ്ങളെ വിട്ടുപോയവരുമായും ഞങ്ങൾ പ്രവർത്തിക്കുന്നു. അതിനാൽ, യഥാർത്ഥ വോള്യങ്ങൾ ശ്രദ്ധേയമായി വലുതാണ്.

2 ബില്യൺ ഇടപാടുകൾ ബാലൻസ് ദിവസവും മാറുന്നു - ഇവ പേയ്‌മെന്റുകൾ, ചാർജുകൾ, കോളുകൾ, മറ്റ് ഇവന്റുകൾ എന്നിവയാണ്. 200 TB ഡാറ്റ സജീവമായി മാറിക്കൊണ്ടിരിക്കുന്നു, അല്പം പതുക്കെ മാറ്റുക 8 പിബി ഡാറ്റ, ഇതൊരു ആർക്കൈവ് അല്ല, ഒരൊറ്റ ബില്ലിംഗിലെ തത്സമയ ഡാറ്റയാണ്. ഡാറ്റാ സെന്റർ പ്രകാരം സ്കെയിൽ - 5 സൈറ്റുകളിൽ 14 ആയിരം സെർവറുകൾ.

ടെക്നോളജി സ്റ്റാക്ക്

Когда спланировали архитектуру и взялись собирать систему, то импортировали себе самые интересные и передовые технологии. Получился технологический стек, знакомый любому игроку интернета и корпорациям, которые делают высоконагруженные системы.

മറ്റ് പ്രധാന കളിക്കാരുടെ സ്റ്റാക്കുകൾക്ക് സമാനമാണ് സ്റ്റാക്ക്: Netflix, Twitter, Viber. ഇതിൽ 6 ഘടകങ്ങൾ അടങ്ങിയിരിക്കുന്നു, പക്ഷേ ഞങ്ങൾ അതിനെ ചെറുതാക്കാനും ഏകീകരിക്കാനും ആഗ്രഹിക്കുന്നു.

ഫ്ലെക്സിബിലിറ്റി നല്ലതാണ്, എന്നാൽ ഒരു വലിയ കോർപ്പറേഷനിൽ ഏകീകരണമില്ലാതെ ഒരു മാർഗവുമില്ല.

ഞങ്ങൾ അതേ ഒറാക്കിളിനെ ടാരന്തൂളിലേക്ക് മാറ്റാൻ പോകുന്നില്ല. വലിയ കമ്പനികളുടെ യാഥാർത്ഥ്യങ്ങളിൽ, ഇത് ഒരു ഉട്ടോപ്യയാണ്, അല്ലെങ്കിൽ 5-10 വർഷത്തേക്ക് വ്യക്തമല്ലാത്ത ഫലങ്ങളുള്ള ഒരു കുരിശുയുദ്ധമാണ്. എന്നാൽ കസാന്ദ്രയും കൗച്ച്‌ബേസും ടരന്റൂൾ ഉപയോഗിച്ച് എളുപ്പത്തിൽ മാറ്റിസ്ഥാപിക്കാം, അതിനാണ് ഞങ്ങൾ പരിശ്രമിക്കുന്നത്.

എന്തുകൊണ്ട് ടാരന്തൂൾ?

ഞങ്ങൾ ഈ ഡാറ്റാബേസ് തിരഞ്ഞെടുത്തതിന് 4 ലളിതമായ മാനദണ്ഡങ്ങളുണ്ട്.

വേഗത. MegaFon വ്യാവസായിക സംവിധാനങ്ങളിൽ ഞങ്ങൾ ലോഡ് ടെസ്റ്റുകൾ നടത്തി. Tarantool വിജയിച്ചു - അത് മികച്ച പ്രകടനം കാണിച്ചു.

മറ്റ് സിസ്റ്റങ്ങൾ മെഗാഫോണിന്റെ ആവശ്യങ്ങൾ നിറവേറ്റുന്നില്ലെന്ന് ഇതിനർത്ഥമില്ല. നിലവിലെ മെമ്മറി സൊല്യൂഷനുകൾ വളരെ ഉൽപ്പാദനക്ഷമമായതിനാൽ കമ്പനിയുടെ കരുതൽ ശേഖരം ആവശ്യത്തിലധികം വരും. എന്നാൽ ഒരു നേതാവുമായി ഇടപെടുന്നതിലാണ് ഞങ്ങൾക്ക് താൽപ്പര്യമുള്ളത്, അല്ലാതെ ലോഡ് ടെസ്റ്റിൽ ഉൾപ്പെടെ പിന്നിലുള്ള ഒരാളുമായിട്ടല്ല.

ദീർഘകാലത്തേക്ക് പോലും കമ്പനിയുടെ ആവശ്യങ്ങൾ Tarantool കവർ ചെയ്യുന്നു.

TCO ചെലവ്. MegaFon വോള്യങ്ങളിൽ Couchbase-നുള്ള പിന്തുണയ്ക്ക് ജ്യോതിശാസ്ത്രപരമായ പണം ചിലവാകും, എന്നാൽ Tarantool-ന്റെ കൂടെ സ്ഥിതി വളരെ മനോഹരമാണ്, മാത്രമല്ല അവ പ്രവർത്തനക്ഷമതയിലും സമാനമാണ്.

ഞങ്ങളുടെ തിരഞ്ഞെടുപ്പിനെ ചെറുതായി സ്വാധീനിച്ച മറ്റൊരു നല്ല സവിശേഷത, മറ്റ് ഡാറ്റാബേസുകളേക്കാൾ ടരന്റൂൾ മെമ്മറിയിൽ നന്നായി പ്രവർത്തിക്കുന്നു എന്നതാണ്. അവൻ കാണിക്കുന്നു പരമാവധി കാര്യക്ഷമത.

വിശ്വാസ്യത. മെഗാഫോൺ വിശ്വാസ്യതയിൽ നിക്ഷേപിക്കുന്നു, ഒരുപക്ഷേ മറ്റാരെക്കാളും കൂടുതൽ. അതിനാൽ ഞങ്ങൾ ടാരന്തൂളിലേക്ക് നോക്കിയപ്പോൾ, അത് ഞങ്ങളുടെ ആവശ്യങ്ങൾ നിറവേറ്റണമെന്ന് ഞങ്ങൾ മനസ്സിലാക്കി.

ഞങ്ങൾ ഞങ്ങളുടെ സമയവും സാമ്പത്തികവും നിക്ഷേപിച്ചു, Mail.ru-യുമായി ചേർന്ന് ഞങ്ങൾ ഒരു എന്റർപ്രൈസ് പതിപ്പ് സൃഷ്ടിച്ചു, അത് ഇപ്പോൾ മറ്റ് നിരവധി കമ്പനികളിൽ ഉപയോഗിക്കുന്നു.

സുരക്ഷ, വിശ്വാസ്യത, ലോഗിംഗ് എന്നിവയിൽ Tarantool-എന്റർപ്രൈസ് ഞങ്ങളെ പൂർണ്ണമായും തൃപ്തിപ്പെടുത്തി.

പങ്കാളിത്തം

എന്നെ സംബന്ധിച്ചിടത്തോളം ഏറ്റവും പ്രധാനപ്പെട്ട കാര്യം ഡെവലപ്പറുമായി നേരിട്ട് ബന്ധപ്പെടുക. ടാരന്തൂളിൽ നിന്നുള്ള ആളുകൾ കൈക്കൂലി നൽകിയത് ഇതാണ്.

നിങ്ങൾ ഒരു കളിക്കാരന്റെ അടുത്ത് വന്നാൽ, പ്രത്യേകിച്ച് ഒരു ആങ്കർ ക്ലയന്റിനൊപ്പം പ്രവർത്തിക്കുന്ന ഒരാളുടെ അടുത്ത് വന്ന്, ഇതും ഇതും ഇതും ചെയ്യാൻ നിങ്ങൾക്ക് ഡാറ്റാബേസ് ആവശ്യമാണെന്ന് പറയുകയാണെങ്കിൽ, അവൻ സാധാരണയായി ഉത്തരം നൽകുന്നു:

- ശരി, ആവശ്യകതകൾ ആ കൂമ്പാരത്തിന്റെ അടിയിൽ ഇടുക - എന്നെങ്കിലും, ഞങ്ങൾ അവയിൽ എത്തിച്ചേരും.

പലർക്കും അടുത്ത 2-3 വർഷത്തേക്ക് ഒരു റോഡ്‌മാപ്പ് ഉണ്ട്, അവിടെ സംയോജിപ്പിക്കുന്നത് മിക്കവാറും അസാധ്യമാണ്, പക്ഷേ ടാരന്റൂൾ ഡവലപ്പർമാർ അവരുടെ തുറന്ന മനസ്സിനെ ആകർഷിക്കുന്നു, മാത്രമല്ല മെഗാഫോണിൽ നിന്ന് മാത്രമല്ല, അവരുടെ സിസ്റ്റം ഉപഭോക്താവിന് അനുയോജ്യമാക്കുകയും ചെയ്യുന്നു. ഇത് രസകരമാണ്, ഞങ്ങൾ ഇത് ശരിക്കും ഇഷ്ടപ്പെടുന്നു.

ഞങ്ങൾ എവിടെയാണ് ടാരന്റൂൾ ഉപയോഗിച്ചത്

ഞങ്ങൾ പല ഘടകങ്ങളിൽ Tarantool ഉപയോഗിക്കുന്നു. ആദ്യത്തേത് പൈലറ്റിലാണ്, ഞങ്ങൾ വിലാസ ഡയറക്ടറി സിസ്റ്റത്തിൽ ഉണ്ടാക്കിയതാണ്. ഒരു കാലത്ത് Yandex.Maps, Google Maps എന്നിവയ്ക്ക് സമാനമായ ഒരു സിസ്റ്റം ആയിരിക്കണമെന്ന് ഞാൻ ആഗ്രഹിച്ചു, പക്ഷേ അത് അൽപ്പം വ്യത്യസ്തമായി മാറി.

ഉദാഹരണത്തിന്, സെയിൽസ് ഇന്റർഫേസിലെ വിലാസ കാറ്റലോഗ്. Oracle-ൽ, ആവശ്യമുള്ള വിലാസം തിരയുന്നതിന് 12-13 സെക്കൻഡ് എടുക്കും. - അസുഖകരമായ സംഖ്യകൾ. ഞങ്ങൾ Tarantool-ലേക്ക് മാറുമ്പോൾ, കൺസോളിൽ മറ്റൊരു ഡാറ്റാബേസ് ഉപയോഗിച്ച് Oracle മാറ്റിസ്ഥാപിക്കുമ്പോൾ, അതേ തിരയൽ നടത്തുമ്പോൾ, നമുക്ക് 200x വേഗത ലഭിക്കും! മൂന്നാമത്തെ അക്ഷരത്തിന് ശേഷം നഗരം പ്രത്യക്ഷപ്പെടുന്നു. ഇപ്പോൾ ഞങ്ങൾ ഇന്റർഫേസ് പൊരുത്തപ്പെടുത്തുകയാണ്, അങ്ങനെ ആദ്യത്തേതിന് ശേഷം ഇത് സംഭവിക്കുന്നു. എന്നിരുന്നാലും, പ്രതികരണ വേഗത തികച്ചും വ്യത്യസ്തമാണ് - സെക്കൻഡുകൾക്ക് പകരം മില്ലിസെക്കൻഡ്.

രണ്ടാമത്തെ ആപ്ലിക്കേഷൻ ടു-സ്പീഡ് ഐടി എന്ന ട്രെൻഡി തീം ആണ്. കാരണം, കോർപ്പറേഷനുകൾ അവിടെ പോകണമെന്ന് ഓരോ കോണിൽ നിന്നും കൺസൾട്ടന്റുമാർ പറയുന്നു.

ഒരു ഇൻഫ്രാസ്ട്രക്ചർ ലെയർ ഉണ്ട്, അതിന് മുകളിൽ ഡൊമെയ്‌നുകൾ ഉണ്ട്, ഉദാഹരണത്തിന്, ടെലികോം, കോർപ്പറേറ്റ് സിസ്റ്റങ്ങൾ, കോർപ്പറേറ്റ് റിപ്പോർട്ടിംഗ് പോലുള്ള ബില്ലിംഗ് സിസ്റ്റം. സ്പർശിക്കേണ്ടതില്ലാത്ത കാതൽ ഇതാണ്. അതായത്, തീർച്ചയായും, ഇത് സാധ്യമാണ്, പക്ഷേ ഭ്രാന്തമായി ഗുണനിലവാരം ഉറപ്പാക്കുന്നു, കാരണം ഇത് കോർപ്പറേഷനിലേക്ക് പണം കൊണ്ടുവരുന്നു.

അടുത്തതായി മൈക്രോസർവീസുകളുടെ പാളി വരുന്നു - ഓപ്പറേറ്ററെയോ മറ്റ് കളിക്കാരനെയോ വ്യത്യസ്തമാക്കുന്നത്. വിവിധ ഡൊമെയ്‌നുകളിൽ നിന്നുള്ള ഡാറ്റ കൊണ്ടുവരുന്ന ചില കാഷെകളെ അടിസ്ഥാനമാക്കി മൈക്രോ സർവീസുകൾ വേഗത്തിൽ സൃഷ്‌ടിക്കാനാകും. ഇവിടെ പരീക്ഷണങ്ങൾക്കുള്ള ഫീൽഡ് - എന്തെങ്കിലും പ്രവർത്തിക്കുന്നില്ലെങ്കിൽ, ഞാൻ ഒരു മൈക്രോസർവീസ് അടച്ച് മറ്റൊന്ന് തുറന്നു. ഇത് യഥാർത്ഥത്തിൽ വർദ്ധിപ്പിച്ച സമയം-ടു-വിപണി നൽകുകയും കമ്പനിയുടെ വിശ്വാസ്യതയും വേഗതയും വർദ്ധിപ്പിക്കുകയും ചെയ്യുന്നു.

MegaFon-ലെ Tarantool-ന്റെ പ്രധാന പങ്ക് മൈക്രോസർവീസുകളായിരിക്കാം.

ടാരന്റൂൾ ഉപയോഗിക്കാൻ ഞങ്ങൾ ഉദ്ദേശിക്കുന്നിടത്ത്

ഞങ്ങളുടെ വിജയകരമായ ബില്ലിംഗ് പ്രോജക്റ്റിനെ Deutsche Telekom, Svyazcom, Vodafone India എന്നിവയിലെ പരിവർത്തന പ്രോഗ്രാമുകളുമായി താരതമ്യം ചെയ്താൽ, അത് അതിശയകരമാം വിധം ചലനാത്മകവും സർഗ്ഗാത്മകവുമാണ്. ഈ പ്രോജക്റ്റ് നടപ്പിലാക്കുന്ന പ്രക്രിയയിൽ, MegaFon ഉം അതിന്റെ ഘടനയും രൂപാന്തരപ്പെട്ടു, Mail.ru- ൽ Tarantool-എന്റർപ്രൈസും പ്രത്യക്ഷപ്പെട്ടു, ഞങ്ങളുടെ വെണ്ടർ Nexign (മുമ്പ് പീറ്റർ-സർവീസ്) - BSS ബോക്സ് (ഒരു പെട്ടി ബില്ലിംഗ് പരിഹാരം).

ഇത് ഒരർത്ഥത്തിൽ റഷ്യൻ വിപണിയെ സംബന്ധിച്ചിടത്തോളം ഒരു ചരിത്ര പദ്ധതിയാണ്. ഫ്രെഡറിക് ബ്രൂക്സിന്റെ "ദി മിഥിക്കൽ മാൻ-മണ്ട്" എന്ന പുസ്തകത്തിൽ വിവരിച്ചിരിക്കുന്നതുമായി ഇതിനെ താരതമ്യം ചെയ്യാം. പിന്നീട്, 60-കളിൽ, മെയിൻഫ്രെയിമുകൾക്കായി പുതിയ OS/360 ഓപ്പറേറ്റിംഗ് സിസ്റ്റം വികസിപ്പിക്കാൻ IBM 5 പേരെ നിയമിച്ചു. ഞങ്ങൾക്ക് കുറവാണ് - 000, എന്നാൽ ഞങ്ങളുടേത് വസ്ത്രങ്ങളിലാണ്, കൂടാതെ ഓപ്പൺ സോഴ്‌സിന്റെ ഉപയോഗവും പുതിയ സമീപനങ്ങളും കണക്കിലെടുക്കുമ്പോൾ ഞങ്ങൾ കൂടുതൽ ഉൽപ്പാദനക്ഷമമായി പ്രവർത്തിക്കുന്നു.

ബില്ലിംഗിന്റെ ഡൊമെയ്‌നുകൾ അല്ലെങ്കിൽ കൂടുതൽ വിശാലമായി പറഞ്ഞാൽ, ബിസിനസ്സ് സിസ്റ്റങ്ങൾ ചുവടെയുണ്ട്. എന്റർപ്രൈസസിൽ നിന്നുള്ള ആളുകൾക്ക് CRM നന്നായി അറിയാം. എല്ലാവർക്കും ഇതിനകം മറ്റ് സിസ്റ്റങ്ങൾ ഉണ്ടായിരിക്കണം: API, API ഗേറ്റ്‌വേ തുറക്കുക.

API തുറക്കുക

നമുക്ക് വീണ്ടും നമ്പറുകൾ നോക്കാം, ഓപ്പൺ API നിലവിൽ എങ്ങനെ പ്രവർത്തിക്കുന്നു. അതിന്റെ ലോഡ് ആണ് സെക്കൻഡിൽ 10 ഇടപാടുകൾ. മൈക്രോസർവീസസ് ലെയർ സജീവമായി വികസിപ്പിക്കാനും MegaFon പൊതു API നിർമ്മിക്കാനും ഞങ്ങൾ പദ്ധതിയിടുന്നതിനാൽ, ഈ ഭാഗത്ത് ഭാവിയിൽ കൂടുതൽ വളർച്ച പ്രതീക്ഷിക്കുന്നു. തീർച്ചയായും 100 ഇടപാടുകൾ ഉണ്ടാകും.

SSO-യിലെ Mail.ru-മായി നമുക്ക് താരതമ്യം ചെയ്യാൻ കഴിയുമോ എന്ന് എനിക്കറിയില്ല - ആൺകുട്ടികൾക്ക് സെക്കൻഡിൽ 1 ഇടപാടുകൾ ഉണ്ടെന്ന് തോന്നുന്നു. അവരുടെ പരിഹാരം ഞങ്ങൾക്ക് വളരെ രസകരമാണ്, അവരുടെ അനുഭവം സ്വീകരിക്കാൻ ഞങ്ങൾ പദ്ധതിയിടുന്നു - ഉദാഹരണത്തിന്, Tarantool ഉപയോഗിച്ച് ഒരു ഫംഗ്ഷണൽ SSO ബാക്കപ്പ് ഉണ്ടാക്കുക. ഇപ്പോൾ Mail.ru-ൽ നിന്നുള്ള ഡെവലപ്പർമാർ ഞങ്ങൾക്കായി ഇത് ചെയ്യുന്നു.

CRM

ഞങ്ങൾ ഒരു ബില്യണായി ഉയർത്താൻ ആഗ്രഹിക്കുന്ന അതേ 80 ദശലക്ഷം വരിക്കാരാണ് CRM, കാരണം മൂന്ന് വർഷത്തെ ചരിത്രം ഉൾപ്പെടുന്ന 300 ദശലക്ഷം ഡോക്യുമെന്റുകൾ ഇതിനകം തന്നെയുണ്ട്. ഞങ്ങൾ ഇവിടെ പുതിയ സേവനങ്ങൾക്കായി കാത്തിരിക്കുകയാണ് വളർച്ചാ പോയിന്റ് ബന്ധിപ്പിച്ച സേവനങ്ങളാണ്. ഇത് വളരുന്ന ഒരു പന്താണ്, കാരണം കൂടുതൽ കൂടുതൽ സേവനങ്ങൾ ഉണ്ടാകും. അതനുസരിച്ച്, ഞങ്ങൾക്ക് ഒരു കഥ ആവശ്യമാണ്; ഇതിൽ ഇടറാൻ ഞങ്ങൾ ആഗ്രഹിക്കുന്നില്ല.

ഇൻവോയ്‌സുകൾ ഇഷ്യൂ ചെയ്യുന്നതിന്റെ കാര്യത്തിൽ സ്വയം ബില്ലിംഗ്, സ്വീകാര്യമായ ഉപഭോക്തൃ അക്കൗണ്ടുകളുമായി പ്രവർത്തിക്കുക ഒരു പ്രത്യേക ഡൊമെയ്‌നായി രൂപാന്തരപ്പെട്ടു. പ്രകടനം മെച്ചപ്പെടുത്തുന്നതിന്, പ്രയോഗിച്ച ഡൊമെയ്ൻ ആർക്കിടെക്ചർ ആർക്കിടെക്ചറൽ പാറ്റേൺ.

സിസ്റ്റം ഡൊമെയ്‌നുകളായി തിരിച്ചിരിക്കുന്നു, ലോഡ് വിതരണം ചെയ്യുകയും തെറ്റ് സഹിഷ്ണുത ഉറപ്പാക്കുകയും ചെയ്യുന്നു. കൂടാതെ, ഞങ്ങൾ വിതരണം ചെയ്ത വാസ്തുവിദ്യയിൽ പ്രവർത്തിച്ചു.

മറ്റെല്ലാം എന്റർപ്രൈസ് തലത്തിലുള്ള പരിഹാരങ്ങളാണ്. കോൾ സ്റ്റോറേജിൽ - പ്രതിദിനം 2 ബില്യൺ, പ്രതിമാസം 60 ബില്യൺ. ചിലപ്പോൾ നിങ്ങൾ ഒരു മാസത്തിനുള്ളിൽ അവ കണക്കാക്കണം, അത് വേഗത്തിൽ നല്ലതാണ്. സാമ്പത്തിക നിരീക്ഷണം - ഇത് നിരന്തരം വളരുകയും വളരുകയും ചെയ്യുന്ന അതേ 300 ദശലക്ഷമാണ്: സബ്‌സ്‌ക്രൈബർമാർ പലപ്പോഴും ഓപ്പറേറ്റർമാർക്കിടയിൽ പ്രവർത്തിക്കുന്നു, ഈ ഭാഗം വർദ്ധിപ്പിക്കുന്നു.

മൊബൈൽ ആശയവിനിമയത്തിലെ ഏറ്റവും ടെലികോം ഘടകം ഓൺലൈൻ ബില്ലിംഗ്. വിളിക്കാനും വിളിക്കാതിരിക്കാനും തത്സമയം തീരുമാനങ്ങൾ എടുക്കാനും നിങ്ങളെ അനുവദിക്കുന്ന സംവിധാനങ്ങളാണിവ. ഇവിടെ ലോഡ് ഒരു സെക്കൻഡിൽ 30 ഇടപാടുകളാണ്, എന്നാൽ ഡാറ്റാ കൈമാറ്റത്തിലെ വളർച്ച കണക്കിലെടുത്ത് ഞങ്ങൾ ആസൂത്രണം ചെയ്യുന്നു 250 ഇടപാടുകൾ, അതിനാൽ ഞങ്ങൾക്ക് ടാരന്റൂളിൽ താൽപ്പര്യമുണ്ട്.

മുമ്പത്തെ ചിത്രം ഞങ്ങൾ Tarantool ഉപയോഗിക്കാൻ പോകുന്ന ഡൊമെയ്‌നുകളാണ്. CRM തന്നെ, തീർച്ചയായും, വിശാലമാണ്, ഞങ്ങൾ അത് കാമ്പിൽ തന്നെ ഉപയോഗിക്കാൻ പോകുന്നു.

100 ദശലക്ഷം വരിക്കാരുടെ ഞങ്ങളുടെ കണക്കാക്കിയ TTX കണക്ക് ഒരു ആർക്കിടെക്റ്റ് എന്ന നിലയിൽ എന്നെ ആശയക്കുഴപ്പത്തിലാക്കുന്നു - 101 ദശലക്ഷം ആണെങ്കിൽ? നിങ്ങൾ എല്ലാം വീണ്ടും വീണ്ടും ചെയ്യേണ്ടതുണ്ടോ? ഇത് സംഭവിക്കുന്നത് തടയാൻ, ഞങ്ങൾ കാഷെകൾ ഉപയോഗിക്കുന്നു, അതേ സമയം പ്രവേശനക്ഷമത വർദ്ധിപ്പിക്കുന്നു.

പൊതുവേ, Tarantool ഉപയോഗിക്കുന്നതിന് രണ്ട് സമീപനങ്ങളുണ്ട്. ആദ്യം - മൈക്രോ സർവീസ് തലത്തിൽ എല്ലാ കാഷെകളും നിർമ്മിക്കുക. ഞാൻ മനസ്സിലാക്കിയിടത്തോളം, VimpelCom ഈ പാത പിന്തുടരുന്നു, ക്ലയന്റുകളുടെ ഒരു കാഷെ സൃഷ്ടിക്കുന്നു.

ഞങ്ങൾ വെണ്ടർമാരെ ആശ്രയിക്കുന്നത് കുറവാണ്, ഞങ്ങൾ BSS കോർ മാറ്റുകയാണ്, അതിനാൽ ബോക്സിന് പുറത്ത് ഞങ്ങൾക്ക് ഒരൊറ്റ ക്ലയന്റ് ഫയൽ ഉണ്ട്. എന്നാൽ ഞങ്ങൾ അത് വികസിപ്പിക്കാൻ ആഗ്രഹിക്കുന്നു. അതിനാൽ, ഞങ്ങൾ അല്പം വ്യത്യസ്തമായ ഒരു സമീപനം സ്വീകരിക്കുന്നു - സിസ്റ്റങ്ങൾക്കുള്ളിൽ കാഷെകൾ ഉണ്ടാക്കുക.

ഈ രീതിയിൽ കുറച്ച് സിൻക്രൊണൈസേഷൻ ഉണ്ട് - കാഷെയ്ക്കും പ്രധാന മാസ്റ്റർ ഉറവിടത്തിനും ഒരു സിസ്റ്റം ഉത്തരവാദിയാണ്.

അപ്‌ഡേറ്റുകളുമായി ബന്ധപ്പെട്ട ഭാഗങ്ങൾ മാത്രം അപ്‌ഡേറ്റ് ചെയ്യുമ്പോൾ, അതായത് ഡാറ്റാ മാറ്റങ്ങൾ, അപ്‌ഡേറ്റ് ചെയ്യുമ്പോൾ, ഒരു ഇടപാട് അസ്ഥികൂടത്തോടുകൂടിയ ടാരന്റൂൾ സമീപനവുമായി ഈ രീതി നന്നായി യോജിക്കുന്നു. ബാക്കിയുള്ളതെല്ലാം മറ്റെവിടെയെങ്കിലും സൂക്ഷിക്കാം. വലിയ ഡാറ്റ തടാകമില്ല, നിയന്ത്രിക്കാത്ത ആഗോള കാഷെ. കാഷെകൾ രൂപകൽപ്പന ചെയ്തിരിക്കുന്നത് സിസ്റ്റത്തിനോ ഉൽപ്പന്നങ്ങൾക്കോ ​​ക്ലയന്റുകൾക്കോ ​​​​അല്ലെങ്കിൽ അറ്റകുറ്റപ്പണികൾക്കായി ജീവിതം എളുപ്പമാക്കുന്നതിന് വേണ്ടിയാണ്. ഒരു വരിക്കാരൻ വിളിക്കുകയും നിങ്ങളുടെ സേവനത്തിന്റെ ഗുണനിലവാരത്തെക്കുറിച്ച് അസ്വസ്ഥനാകുകയും ചെയ്യുമ്പോൾ, നിങ്ങൾ ഗുണനിലവാരമുള്ള സേവനം നൽകാൻ ആഗ്രഹിക്കുന്നു.

RTO и RPO

ഐടിയിൽ രണ്ട് പദങ്ങളുണ്ട് - ആർ.ടി.ഒ и ആർ‌പി‌ഒ.

വീണ്ടെടുക്കൽ സമയ ലക്ഷ്യം ഒരു പരാജയത്തിന് ശേഷം സേവനം പുനഃസ്ഥാപിക്കാൻ എടുക്കുന്ന സമയമാണ്. RTO = 0 എന്നാൽ എന്തെങ്കിലും പരാജയപ്പെടുകയാണെങ്കിൽ പോലും, സേവനം തുടർന്നും പ്രവർത്തിക്കുന്നു എന്നാണ്.

വീണ്ടെടുക്കൽ പോയിന്റ് ലക്ഷ്യം - ഇതാണ് ഡാറ്റ വീണ്ടെടുക്കൽ സമയം, ഒരു നിശ്ചിത കാലയളവിൽ നമുക്ക് എത്രത്തോളം ഡാറ്റ നഷ്ടപ്പെടാം. RPO = 0 എന്നാൽ നമുക്ക് ഡാറ്റ നഷ്‌ടപ്പെടുന്നില്ല എന്നാണ്.

ടാരന്റൂൾ ടാസ്ക്

Давайте попробуем решить для Tarantool задачу.

നൽകിയത്: എല്ലാവർക്കും മനസ്സിലാകുന്ന ഒരു കൂട്ടം ആപ്ലിക്കേഷനുകൾ, ഉദാഹരണത്തിന്, ആമസോണിലോ മറ്റെവിടെയെങ്കിലുമോ. ആവശ്യമാണ് അങ്ങനെ ഷോപ്പിംഗ് കാർട്ട് ആഴ്ചയിൽ 24 മണിക്കൂറും 7 ദിവസവും അല്ലെങ്കിൽ 99,99% സമയവും പ്രവർത്തിക്കുന്നു. ഞങ്ങൾക്ക് വരുന്ന ഓർഡറുകൾ ക്രമത്തിൽ നിലനിൽക്കണം, കാരണം ഞങ്ങൾക്ക് ക്രമരഹിതമായി വരിക്കാരന്റെ കണക്ഷൻ ഓണാക്കാനോ ഓഫാക്കാനോ കഴിയില്ല - എല്ലാം കർശനമായി സ്ഥിരതയുള്ളതായിരിക്കണം. മുമ്പത്തെ സബ്‌സ്‌ക്രിപ്‌ഷൻ അടുത്തതിനെ ബാധിക്കുന്നു, അതിനാൽ ഡാറ്റ പ്രധാനമാണ് - ഒന്നും കാണാതെ പോകരുത്.

തീരുമാനം. നിങ്ങൾക്ക് ഇത് നേരിട്ട് പരിഹരിക്കാനും ഡാറ്റാബേസ് ഡെവലപ്പർമാരോട് ചോദിക്കാനും ശ്രമിക്കാം, പക്ഷേ പ്രശ്നം ഗണിതശാസ്ത്രപരമായി പരിഹരിക്കാൻ കഴിയില്ല. നിങ്ങൾക്ക് സിദ്ധാന്തങ്ങൾ, സംരക്ഷണ നിയമങ്ങൾ, ക്വാണ്ടം ഭൗതികശാസ്ത്രം എന്നിവ ഓർക്കാൻ കഴിയും, പക്ഷേ എന്തുകൊണ്ട് - ഇത് ഡിബി തലത്തിൽ പരിഹരിക്കാൻ കഴിയില്ല.

Здесь работает старый добрый архитектурный подход — нужно хорошо знать предметную область и за ее счет разрешить этот ребус.

ഞങ്ങളുടെ പരിഹാരം: ടാരന്റൂളിൽ ആപ്ലിക്കേഷനുകളുടെ ഒരു വിതരണം ചെയ്ത രജിസ്ട്രി സൃഷ്ടിക്കുന്നു - ഒരു ജിയോ ഡിസ്ട്രിബ്യൂട്ടഡ് ക്ലസ്റ്റർ. ഡയഗ്രാമിൽ, ഇവ മൂന്ന് വ്യത്യസ്ത ഡാറ്റാ പ്രോസസ്സിംഗ് സെന്ററുകളാണ് - രണ്ട് യുറലുകൾക്ക് മുമ്പ്, ഒന്ന് യുറലുകൾക്ക് അപ്പുറം, ഈ കേന്ദ്രങ്ങൾക്കിടയിൽ ഞങ്ങൾ എല്ലാ അഭ്യർത്ഥനകളും വിതരണം ചെയ്യുന്നു.

ഇപ്പോൾ ഐടിയിലെ പ്രമുഖരിൽ ഒരാളായി കണക്കാക്കപ്പെടുന്ന നെറ്റ്ഫ്ലിക്സിന് 2012 വരെ ഒരു ഡാറ്റാ സെന്റർ മാത്രമേ ഉണ്ടായിരുന്നുള്ളൂ. ഡിസംബർ 24-ന് കത്തോലിക്കാ ക്രിസ്മസിന്റെ തലേന്ന് ഈ ഡാറ്റാ സെന്റർ പ്രവർത്തനരഹിതമായി. കാനഡയിലെയും യു‌എസ്‌എയിലെയും ഉപയോക്താക്കൾ അവരുടെ പ്രിയപ്പെട്ട സിനിമകൾ ഇല്ലാതെ അവശേഷിച്ചു, വളരെ അസ്വസ്ഥരായി സോഷ്യൽ നെറ്റ്‌വർക്കുകളിൽ അതിനെക്കുറിച്ച് എഴുതി. നെറ്റ്ഫ്ലിക്സിന് ഇപ്പോൾ പടിഞ്ഞാറൻ-കിഴക്കൻ തീരത്ത് മൂന്ന് ഡാറ്റാ സെന്ററുകളും പടിഞ്ഞാറൻ യൂറോപ്പിൽ ഒന്ന് ഉണ്ട്.

ഞങ്ങൾ തുടക്കത്തിൽ ഒരു ജിയോ ഡിസ്ട്രിബ്യൂട്ടഡ് സൊല്യൂഷൻ നിർമ്മിക്കുകയാണ് - തെറ്റ് സഹിഷ്ണുത ഞങ്ങൾക്ക് പ്രധാനമാണ്.

അപ്പോൾ ഞങ്ങൾക്ക് ഒരു ക്ലസ്റ്റർ ഉണ്ട്, എന്നാൽ RPO = 0, RTO = 0 എന്നിവയെ സംബന്ധിച്ചെന്ത്? വിഷയം അനുസരിച്ച് പരിഹാരം ലളിതമാണ്.

ആപ്ലിക്കേഷനുകളിൽ എന്താണ് പ്രധാനം? രണ്ട് ഭാഗങ്ങൾ: കൊട്ട എറിയൽ TO ഒരു വാങ്ങൽ തീരുമാനം എടുക്കൽ, ഒപ്പം ശേഷം. ടെലികോമിലെ DO ഭാഗത്തെ സാധാരണയായി വിളിക്കുന്നു ഓർഡർ പിടിച്ചെടുക്കൽ അഥവാ ഓർഡർ ചർച്ച. ടെലികോമിൽ, ഇത് ഒരു ഓൺലൈൻ സ്റ്റോറിനേക്കാൾ വളരെ ബുദ്ധിമുട്ടാണ്, കാരണം അവിടെ ക്ലയന്റിന് സേവനം നൽകണം, 5 ഓപ്ഷനുകൾ വാഗ്ദാനം ചെയ്യണം, ഇതെല്ലാം കുറച്ച് സമയത്തേക്ക് സംഭവിക്കുന്നു, പക്ഷേ കൊട്ട നിറഞ്ഞിരിക്കുന്നു. ഈ നിമിഷം, ഒരു പരാജയം സാധ്യമാണ്, പക്ഷേ അത് ഭയാനകമല്ല, കാരണം ഇത് മനുഷ്യന്റെ മേൽനോട്ടത്തിൽ സംവേദനാത്മകമായി സംഭവിക്കുന്നു.

മോസ്കോ ഡാറ്റാ സെന്റർ പെട്ടെന്ന് പരാജയപ്പെടുകയാണെങ്കിൽ, മറ്റൊരു ഡാറ്റാ സെന്ററിലേക്ക് സ്വപ്രേരിതമായി മാറുന്നതിലൂടെ, ഞങ്ങൾ പ്രവർത്തിക്കുന്നത് തുടരും. സൈദ്ധാന്തികമായി, ഒരു ഉൽപ്പന്നം വണ്ടിയിൽ നഷ്‌ടമായേക്കാം, പക്ഷേ നിങ്ങൾ അത് കാണുകയും വീണ്ടും വണ്ടിയിൽ ചേർക്കുകയും പ്രവർത്തിക്കുകയും ചെയ്യുക. ഈ സാഹചര്യത്തിൽ RTO = 0.

അതേ നിമിഷത്തിൽ, രണ്ടാമത്തെ ഓപ്ഷൻ ഉണ്ട്: ഞങ്ങൾ "സമർപ്പിക്കുക" ക്ലിക്ക് ചെയ്യുമ്പോൾ, ഡാറ്റ നഷ്ടപ്പെടാതിരിക്കാൻ ഞങ്ങൾ ആഗ്രഹിക്കുന്നു. ഈ നിമിഷം മുതൽ, ഓട്ടോമേഷൻ പ്രവർത്തിക്കാൻ തുടങ്ങുന്നു - ഇത് RPO = 0. ഈ രണ്ട് വ്യത്യസ്ത പാറ്റേണുകൾ ഉപയോഗിച്ച്, ഒരു സാഹചര്യത്തിൽ ഇത് ഒരു മാറാവുന്ന മാസ്റ്ററുള്ള ഒരു ജിയോ-ഡിസ്ട്രിബ്യൂട്ടഡ് ക്ലസ്റ്ററായിരിക്കാം, മറ്റൊരു സാഹചര്യത്തിൽ ഏതെങ്കിലും തരത്തിലുള്ള കോറം റെക്കോർഡ്. പാറ്റേണുകൾ വ്യത്യാസപ്പെടാം, പക്ഷേ ഞങ്ങൾ പ്രശ്നം പരിഹരിക്കുന്നു.

കൂടാതെ, ആപ്ലിക്കേഷനുകളുടെ ഒരു വിതരണം ചെയ്ത രജിസ്ട്രി ഉള്ളതിനാൽ, ഞങ്ങൾക്ക് അതെല്ലാം സ്കെയിൽ ചെയ്യാനും കഴിയും - ഈ രജിസ്ട്രി ആക്സസ് ചെയ്യുന്ന നിരവധി ഡിസ്പാച്ചർമാരും എക്സിക്യൂട്ടർമാരും ഉണ്ട്.

കസാന്ദ്രയും ടാരന്തൂളും ഒരുമിച്ച്

മറ്റൊരു കേസുണ്ട് - "ബാലൻസ് ഷോകേസ്". Здесь как раз интересный случай совместного применения Cassandra и Tarantool.

ഞങ്ങൾ കസാന്ദ്ര ഉപയോഗിക്കുന്നു, കാരണം പ്രതിദിനം 2 ബില്ല്യൺ കോളുകൾ പരിധി അല്ല, കൂടുതൽ ഉണ്ടാകും. വിപണനക്കാർ സ്രോതസ്സ് അനുസരിച്ച് ട്രാഫിക്കിനെ വർണ്ണിക്കാൻ ഇഷ്ടപ്പെടുന്നു; സോഷ്യൽ നെറ്റ്‌വർക്കുകളിൽ കൂടുതൽ കൂടുതൽ വിശദാംശങ്ങൾ ദൃശ്യമാകുന്നു, ഉദാഹരണത്തിന്. അതെല്ലാം കഥയിലേക്ക് ചേർക്കുന്നു.

ഏത് വലുപ്പത്തിലും തിരശ്ചീനമായി സ്കെയിൽ ചെയ്യാൻ കസാന്ദ്ര നിങ്ങളെ അനുവദിക്കുന്നു.

കസാന്ദ്രയിൽ ഞങ്ങൾക്ക് സുഖം തോന്നുന്നു, പക്ഷേ അതിന് ഒരു പ്രശ്നമുണ്ട് - അത് വായിക്കുന്നതിൽ നല്ലതല്ല. റെക്കോർഡിംഗിൽ എല്ലാം ശരിയാണ്, സെക്കൻഡിൽ 30 ഒരു പ്രശ്നമല്ല - വായന പ്രശ്നം.

അതിനാൽ, ഒരു കാഷെ ഉള്ള ഒരു വിഷയം പ്രത്യക്ഷപ്പെട്ടു, അതേ സമയം ഞങ്ങൾ ഇനിപ്പറയുന്ന പ്രശ്നം പരിഹരിച്ചു: ഓൺലൈൻ ബില്ലിംഗിൽ നിന്നുള്ള ഒരു സ്വിച്ചിൽ നിന്നുള്ള ഉപകരണങ്ങൾ ഞങ്ങൾ കസാന്ദ്രയിലേക്ക് ലോഡ് ചെയ്യുന്ന ഫയലുകളിലേക്ക് വരുമ്പോൾ ഒരു പഴയ പരമ്പരാഗത കേസ് ഉണ്ട്. IBM മാനേജർ ഫയൽ കൈമാറ്റത്തിന്റെ ഉപദേശം ഉപയോഗിച്ചുപോലും, ഈ ഫയലുകൾ വിശ്വസനീയമായി ഡൗൺലോഡ് ചെയ്യുന്നതിനുള്ള പ്രശ്‌നവുമായി ഞങ്ങൾ പോരാടി - UDP പ്രോട്ടോക്കോൾ ഉപയോഗിച്ച് ഫയൽ കൈമാറ്റം കാര്യക്ഷമമായി കൈകാര്യം ചെയ്യുന്ന പരിഹാരങ്ങളുണ്ട്, ഉദാഹരണത്തിന്, TCP-ക്ക് പകരം. ഇത് നല്ലതാണ്, പക്ഷേ ഇത് ഇപ്പോഴും മിനിറ്റാണ്, ഞങ്ങൾ ഇതുവരെ എല്ലാം ലോഡുചെയ്‌തിട്ടില്ല, കോൾ സെന്ററിലെ ഓപ്പറേറ്റർക്ക് ക്ലയന്റിന് അവന്റെ ബാലൻസിന് എന്ത് സംഭവിച്ചുവെന്ന് ഉത്തരം നൽകാൻ കഴിയില്ല - ഞങ്ങൾ കാത്തിരിക്കണം.

ഇത് സംഭവിക്കുന്നത് തടയാൻ, ഞങ്ങൾ ഞങ്ങൾ സമാന്തര ഫങ്ഷണൽ റിസർവ് ഉപയോഗിക്കുന്നു. കാഫ്ക വഴി ടാരന്റൂളിലേക്ക് ഒരു ഇവന്റ് അയയ്‌ക്കുമ്പോൾ, തത്സമയം അഗ്രഗേറ്റുകൾ വീണ്ടും കണക്കാക്കുന്നു, ഉദാഹരണത്തിന്, ഇന്നത്തേക്ക്, നമുക്ക് ലഭിക്കും പണം ബാലൻസ്, ഏത് വേഗതയിലും ബാലൻസ് കൈമാറാൻ കഴിയും, ഉദാഹരണത്തിന്, സെക്കൻഡിൽ 100 ​​ആയിരം ഇടപാടുകളും അതേ 2 സെക്കൻഡും.

ഒരു കോൾ ചെയ്തതിന് ശേഷം, നിങ്ങളുടെ സ്വകാര്യ അക്കൗണ്ടിൽ 2 സെക്കൻഡിനുള്ളിൽ മാറിയ ബാലൻസ് മാത്രമല്ല, എന്തുകൊണ്ടാണ് അത് മാറിയത് എന്നതിനെക്കുറിച്ചുള്ള വിവരങ്ങളും ഉണ്ടാകും എന്നതാണ് ലക്ഷ്യം.

തീരുമാനം

ടാരന്റൂൾ ഉപയോഗിക്കുന്നതിന്റെ ഉദാഹരണങ്ങളായിരുന്നു ഇവ. Mail.ru-ന്റെ തുറന്ന സ്വഭാവവും വ്യത്യസ്ത കേസുകൾ പരിഗണിക്കാനുള്ള അവരുടെ സന്നദ്ധതയും ഞങ്ങൾ ശരിക്കും ഇഷ്ടപ്പെട്ടു.

BCG അല്ലെങ്കിൽ McKinsey, Accenture അല്ലെങ്കിൽ IBM എന്നിവയിൽ നിന്നുള്ള കൺസൾട്ടന്റുമാർക്ക് പുതിയ എന്തെങ്കിലും കൊണ്ട് ഞങ്ങളെ അത്ഭുതപ്പെടുത്തുന്നത് ഇതിനകം ബുദ്ധിമുട്ടാണ് - അവർ വാഗ്ദാനം ചെയ്യുന്ന മിക്ക കാര്യങ്ങളും ഞങ്ങൾ ഇതിനകം ചെയ്യുന്നു, ചെയ്തു, അല്ലെങ്കിൽ ചെയ്യാൻ പദ്ധതിയിടുന്നു. ഞങ്ങളുടെ ടെക്‌നോളജി സ്റ്റാക്കിൽ ടരന്റൂൾ അതിന്റെ ശരിയായ സ്ഥാനം നേടുമെന്നും നിലവിലുള്ള നിരവധി സാങ്കേതികവിദ്യകൾ മാറ്റിസ്ഥാപിക്കുമെന്നും ഞാൻ കരുതുന്നു. ഈ പദ്ധതിയുടെ വികസനത്തിന്റെ സജീവ ഘട്ടത്തിലാണ് ഞങ്ങൾ.

ഒലെഗിന്റെയും ആൻഡ്രിയുടെയും റിപ്പോർട്ട് കഴിഞ്ഞ വർഷം ടരന്റൂൾ കോൺഫറൻസിലെ ഏറ്റവും മികച്ച ഒന്നാണ്, ജൂൺ 17 ന് ഒലെഗ് ഇവ്ലേവ് സംസാരിക്കും T+ കോൺഫറൻസ് 2019 ഒരു റിപ്പോർട്ടിനൊപ്പം "എന്തിനാണ് എന്റർപ്രൈസസിൽ ടാരന്റൂൾ". അലക്‌സാണ്ടർ ഡ്യൂലിൻ മെഗാഫോണിന്റെ അവതരണവും നടത്തും "ടറന്റൂൾ കാഷെകളും ഒറക്കിളിൽ നിന്നുള്ള പകർപ്പും". എന്താണ് മാറിയത്, എന്തെല്ലാം പദ്ധതികൾ നടപ്പിലാക്കി എന്ന് നോക്കാം. ചേരുക - കോൺഫറൻസ് സൗജന്യമാണ്, നിങ്ങൾ ചെയ്യേണ്ടത് ഇത്രമാത്രം സൈൻ അപ്പ്. എല്ലാം റിപ്പോർട്ടുകൾ സ്വീകരിച്ചു കൂടാതെ കോൺഫറൻസ് പ്രോഗ്രാം രൂപീകരിച്ചു: പുതിയ കേസുകൾ, ടാരന്റൂൾ, ആർക്കിടെക്ചർ, എന്റർപ്രൈസ്, ട്യൂട്ടോറിയലുകൾ, മൈക്രോ സർവീസുകൾ എന്നിവ ഉപയോഗിക്കുന്നതിൽ പുതിയ അനുഭവം.

അവലംബം: www.habr.com