Yandex SQL പിന്തുണയ്ക്കുന്ന DBMS YDB-യുടെ കോഡ് തുറന്നു

വിതരണം ചെയ്ത YDB DBMS-ന്റെ ഉറവിട പാഠങ്ങൾ Yandex പ്രസിദ്ധീകരിച്ചു, ഇത് SQL ഭാഷാഭേദത്തിനും ACID ഇടപാടുകൾക്കുമുള്ള പിന്തുണ നടപ്പിലാക്കുന്നു. ഡിബിഎംഎസ് ആദ്യം മുതൽ സൃഷ്ടിക്കപ്പെട്ടതാണ്, തെറ്റ് സഹിഷ്ണുത, പരാജയങ്ങളുടെ കാര്യത്തിൽ സ്വയമേവ വീണ്ടെടുക്കൽ, സ്കേലബിളിറ്റി എന്നിവ ഉറപ്പാക്കാൻ ലക്ഷ്യമിട്ടാണ് ആദ്യം വികസിപ്പിച്ചത്. പതിനായിരത്തിലധികം നോഡുകൾ ഉൾപ്പെടെ പ്രവർത്തിക്കുന്ന YDB ക്ലസ്റ്ററുകൾ Yandex സമാരംഭിച്ചു, നൂറുകണക്കിന് പെറ്റാബൈറ്റ് ഡാറ്റ സംഭരിക്കുകയും സെക്കൻഡിൽ ദശലക്ഷക്കണക്കിന് വിതരണ ഇടപാടുകൾ നടത്തുകയും ചെയ്യുന്നു. YDB, Market, Cloud, Smart Home, Alice, Metrika, Auto.ru തുടങ്ങിയ Yandex പ്രോജക്റ്റുകളിൽ ഉപയോഗിക്കുന്നു. കോഡ് C/C++ ൽ എഴുതുകയും Apache 10 ലൈസൻസിന് കീഴിൽ വിതരണം ചെയ്യുകയും ചെയ്യുന്നു. പരിചയപ്പെടുത്തുന്നതിനും ദ്രുത ലോഞ്ച് ചെയ്യുന്നതിനും, നിങ്ങൾക്ക് ഒരു റെഡിമെയ്ഡ് ഡോക്കർ കണ്ടെയ്നർ ഉപയോഗിക്കാം.

പദ്ധതിയുടെ സവിശേഷതകൾ:

• പട്ടികകൾക്കൊപ്പം റിലേഷണൽ ഡാറ്റ മോഡൽ ഉപയോഗിക്കുന്നു. YQL (YDB ക്വറി ലാംഗ്വേജ്) ഡാറ്റാ സ്കീമയെ അന്വേഷിക്കുന്നതിനും നിർവചിക്കുന്നതിനും ഉപയോഗിക്കുന്നു, ഇത് വലിയ വിതരണം ചെയ്ത ഡാറ്റാബേസുകളിൽ പ്രവർത്തിക്കാൻ അനുയോജ്യമായ SQL-ന്റെ ഒരു ഭാഷയാണ്. ഒരു സ്‌റ്റോറേജ് സ്‌കീം സൃഷ്‌ടിക്കുമ്പോൾ, ഒരു ഫയൽ സിസ്റ്റത്തിലെ ഡയറക്‌ടറികളോട് സാമ്യമുള്ള ടേബിളുകളുടെ ഒരു ട്രീ പോലുള്ള ഗ്രൂപ്പിംഗ് പിന്തുണയ്‌ക്കുന്നു. JSON ഫോർമാറ്റിൽ ഡാറ്റയുമായി പ്രവർത്തിക്കുന്നതിന് ഒരു API നൽകിയിരിക്കുന്നു.
• ഡാറ്റാബേസിനെതിരെ അനലിറ്റിക്കൽ അഡ്-ഹോക്ക് അന്വേഷണങ്ങൾ നടത്താൻ രൂപകൽപ്പന ചെയ്‌തിരിക്കുന്ന സ്‌കാൻ അന്വേഷണങ്ങൾ ഉപയോഗിച്ച് ഡാറ്റ ആക്‌സസ് ചെയ്യുന്നതിനുള്ള പിന്തുണ, റീഡ്-ഒൺലി മോഡിൽ എക്‌സിക്യൂട്ട് ചെയ്‌ത് ഒരു grpc സ്ട്രീം നൽകുന്നു.
• C ++, C # (.NET), Go, Java, Node.js, എന്നിവയ്‌ക്കായി ലൈബ്രറികൾ നൽകുന്ന കമാൻഡ് ലൈൻ ഇന്റർഫേസ്, ബിൽറ്റ്-ഇൻ വെബ് ഇന്റർഫേസ് അല്ലെങ്കിൽ YDB SDK ഉപയോഗിച്ചാണ് ഡിബിഎംഎസുമായുള്ള ആശയവിനിമയവും അഭ്യർത്ഥനകൾ അയയ്ക്കലും നടത്തുന്നത്. പിഎച്ച്പിയും പൈത്തണും.
• വ്യക്തിഗത ഡിസ്കുകൾ, നോഡുകൾ, റാക്കുകൾ, കൂടാതെ ഡാറ്റാ സെന്ററുകൾ പോലും പരാജയപ്പെടുമ്പോൾ പ്രവർത്തിക്കുന്നത് തുടരുന്ന തെറ്റ്-സഹിഷ്ണുതയുള്ള കോൺഫിഗറേഷനുകൾ സൃഷ്ടിക്കാനുള്ള കഴിവ്. മൂന്ന് ലഭ്യത സോണുകളിലുടനീളമുള്ള വിന്യാസവും സിൻക്രണസ് റെപ്ലിക്കേഷനും YDB പിന്തുണയ്ക്കുന്നു, അതേസമയം ഒരു സോണിന്റെ പരാജയം സംഭവിക്കുമ്പോൾ ക്ലസ്റ്ററിന്റെ ആരോഗ്യം നിലനിർത്തുന്നു.
• ആപ്ലിക്കേഷനുകൾക്കുള്ള കുറഞ്ഞ കാലതാമസത്തോടെ പരാജയങ്ങളിൽ നിന്ന് സ്വയമേവ വീണ്ടെടുക്കുകയും ഡാറ്റ സംഭരിക്കുമ്പോൾ നിർദ്ദിഷ്ട ആവർത്തനം സ്വയമേവ നിലനിർത്തുകയും ചെയ്യുക.
• പ്രൈമറി കീയിൽ ഇൻഡെക്സുകളുടെ സ്വയമേവ സൃഷ്ടിക്കൽ, അനിയന്ത്രിതമായ നിരകളിലേക്കുള്ള പ്രവേശനത്തിന്റെ കാര്യക്ഷമത മെച്ചപ്പെടുത്തുന്നതിന് ദ്വിതീയ സൂചികകൾ നിർവചിക്കാനുള്ള കഴിവ്.
• തിരശ്ചീന സ്കേലബിളിറ്റി. സംഭരിച്ച ഡാറ്റയുടെ ലോഡും വലുപ്പവും വർദ്ധിക്കുന്നതിനനുസരിച്ച്, പുതിയ നോഡുകൾ ബന്ധിപ്പിച്ച് ക്ലസ്റ്റർ വിപുലീകരിക്കാൻ കഴിയും. കംപ്യൂട്ടും സ്റ്റോറേജ് ടയറുകളും വേർതിരിക്കപ്പെടുന്നു, ഇത് കംപ്യൂട്ടും സ്റ്റോറേജ് സ്കെയിലിംഗും വെവ്വേറെ അനുവദിക്കുന്നു. ലഭ്യമായ ഹാർഡ്‌വെയർ ഉറവിടങ്ങൾ കണക്കിലെടുത്ത് ഡാറ്റയുടെയും ലോഡിന്റെയും ഏകീകൃത വിതരണം ഡിബിഎംഎസ് തന്നെ നിരീക്ഷിക്കുന്നു. ലോകത്തിന്റെ വിവിധ ഭാഗങ്ങളിൽ നിരവധി ഡാറ്റാ സെന്ററുകൾ ഉൾക്കൊള്ളുന്ന ഭൂമിശാസ്ത്രപരമായി വിതരണം ചെയ്ത കോൺഫിഗറേഷനുകൾ വിന്യസിക്കാൻ സാധിക്കും.
• ഒന്നിലധികം നോഡുകളിലും ടേബിളുകളിലും വ്യാപിച്ചുകിടക്കുന്ന അന്വേഷണങ്ങൾ പ്രോസസ്സ് ചെയ്യുമ്പോൾ ശക്തമായ സ്ഥിരത മോഡലിനും ACID ഇടപാടുകൾക്കുമുള്ള പിന്തുണ. പ്രകടനം മെച്ചപ്പെടുത്തുന്നതിന്, നിങ്ങൾക്ക് സ്ഥിരത നിയന്ത്രണം തിരഞ്ഞെടുത്ത് പ്രവർത്തനരഹിതമാക്കാം.
• ഓട്ടോമാറ്റിക് ഡാറ്റ റെപ്ലിക്കേഷൻ, വലിപ്പം അല്ലെങ്കിൽ ലോഡ് വർദ്ധിക്കുമ്പോൾ ഓട്ടോമാറ്റിക് പാർട്ടീഷനിംഗ് (പാർട്ടീഷനിംഗ്, ഷാർഡിംഗ്), കൂടാതെ നോഡുകൾക്കിടയിൽ ഓട്ടോമാറ്റിക് ലോഡും ഡാറ്റ ബാലൻസും.
• നേറ്റീവ് PDisk ഘടകവും VDisk ലെയറും ഉപയോഗിച്ച് ബ്ലോക്ക് ഉപകരണങ്ങളിൽ നേരിട്ട് ഡാറ്റ സംഭരിക്കുന്നു. VDisk-ന് മുകളിൽ, DSProxy പ്രവർത്തിക്കുന്നു, ഇത് ഡിസ്കുകളുടെ ലഭ്യതയും പ്രകടനവും വിശകലനം ചെയ്യുന്നു, പ്രശ്നങ്ങൾ കണ്ടെത്തിയാൽ അവ ഒഴിവാക്കും.
• YDB, വിവിധ സേവനങ്ങൾ, വെർച്വൽ ബ്ലോക്ക് ഉപകരണങ്ങൾ, സ്ഥിരമായ ക്യൂകൾ (സ്ഥിരമായ ക്യൂ) എന്നിവയ്ക്ക് മുകളിൽ സൃഷ്ടിക്കാൻ നിങ്ങളെ അനുവദിക്കുന്ന ഒരു ഫ്ലെക്സിബിൾ ആർക്കിടെക്ചർ. വ്യത്യസ്ത തരം ജോലിഭാരം, OLTP, OLAP (വിശകലന ചോദ്യങ്ങൾ) എന്നിവയ്ക്കുള്ള അപേക്ഷാ അനുയോജ്യത.
• മൾട്ടി-യൂസർ (മൾട്ടിറ്റനന്റ്), സെർവർലെസ് കോൺഫിഗറേഷനുകൾക്കുള്ള പിന്തുണ. ഉപഭോക്താക്കളെ ആധികാരികമാക്കാനുള്ള കഴിവ്. ഉപയോക്താക്കൾക്ക് പൊതുവായ പങ്കിട്ട ഇൻഫ്രാസ്ട്രക്ചറിൽ അവരുടെ സ്വന്തം വെർച്വൽ ക്ലസ്റ്ററുകളും ഡാറ്റാബേസുകളും സൃഷ്ടിക്കാൻ കഴിയും, അഭ്യർത്ഥനകളുടെ എണ്ണത്തിന്റെയും ഡാറ്റാ വലുപ്പത്തിന്റെയും തലത്തിലുള്ള വിഭവ ഉപഭോഗം കണക്കിലെടുത്ത് അല്ലെങ്കിൽ ചില കമ്പ്യൂട്ടിംഗ് ഉറവിടങ്ങളും സംഭരണ ​​സ്ഥലങ്ങളും വാടകയ്‌ക്ക് / റിസർവ് ചെയ്തുകൊണ്ട്.
• കാലഹരണപ്പെട്ട ഡാറ്റ സ്വയമേവ ഇല്ലാതാക്കുന്നതിന് റെക്കോർഡുകളുടെ ആയുസ്സ് ക്രമീകരിക്കാനുള്ള സാധ്യത.

അവലംബം: opennet.ru