Apache Cassandra 4.0 DBMS ലഭ്യമാണ്

അപ്പാച്ചെ സോഫ്റ്റ്‌വെയർ ഫൗണ്ടേഷൻ വിതരണം ചെയ്ത DBMS Apache Cassandra 4.0 ന്റെ പ്രകാശനം അവതരിപ്പിച്ചു, ഇത് noSQL സിസ്റ്റങ്ങളുടെ ക്ലാസിൽ പെടുന്നു, കൂടാതെ ഒരു അസോസിയേറ്റീവ് അറേ (ഹാഷ്) രൂപത്തിൽ സംഭരിച്ചിരിക്കുന്ന വലിയ അളവിലുള്ള ഡാറ്റയുടെ ഉയർന്ന അളവിലുള്ളതും വിശ്വസനീയവുമായ സംഭരണം സൃഷ്ടിക്കാൻ രൂപകൽപ്പന ചെയ്തിട്ടുള്ളതാണ്. കസാന്ദ്ര 4.0 റിലീസ് ഉൽപ്പാദനം നടപ്പിലാക്കാൻ തയ്യാറാണെന്ന് കണക്കാക്കപ്പെടുന്നു, കൂടാതെ 1000-ലധികം നോഡുകളുടെ ക്ലസ്റ്ററുകളുള്ള Amazon, Apple, DataStax, Instaclustr, iland, Netflix എന്നിവയുടെ ഇൻഫ്രാസ്ട്രക്ചറുകളിൽ ഇതിനകം പരീക്ഷിച്ചു. പ്രോജക്റ്റ് കോഡ് ജാവയിൽ എഴുതിയിരിക്കുന്നു, അപ്പാച്ചെ 2.0 ലൈസൻസിന് കീഴിൽ വിതരണം ചെയ്യുന്നു.

കസാന്ദ്ര ഡിബിഎംഎസ് യഥാർത്ഥത്തിൽ ഫേസ്ബുക്ക് വികസിപ്പിച്ചെടുത്തതാണ്, 2009-ൽ അപ്പാച്ചെ ഫൗണ്ടേഷന്റെ കീഴിലാണ് ഇത് കൈമാറിയത്. Apple, Adobe, CERN, Cisco, IBM, HP, Comcast, Disney, eBay, Huawei, Netflix, Sony, Rackspace, Reddit, Twitter തുടങ്ങിയ കമ്പനികളിൽ നിന്നുള്ള പവർ സേവനങ്ങളിലേക്ക് Cassandra അടിസ്ഥാനമാക്കിയുള്ള വ്യാവസായിക പരിഹാരങ്ങൾ വിന്യസിച്ചിട്ടുണ്ട്. ഉദാഹരണത്തിന്, ആപ്പിൾ വിന്യസിച്ചിരിക്കുന്ന അപ്പാച്ചെ കസാന്ദ്ര അടിസ്ഥാനമാക്കിയുള്ള സ്റ്റോറേജ് ഇൻഫ്രാസ്ട്രക്ചറിന് ആയിരത്തിലധികം ക്ലസ്റ്ററുകളുണ്ട്, അതിൽ 160 ആയിരം നോഡുകൾ ഉൾപ്പെടുന്നു, കൂടാതെ 100 പെറ്റാബൈറ്റിലധികം ഡാറ്റ സംഭരിക്കുന്നു. 300 ആയിരം നോഡുകൾ അടങ്ങുന്ന 30-ലധികം അപ്പാച്ചെ കസാന്ദ്ര ക്ലസ്റ്ററുകൾ Huawei ഉപയോഗിക്കുന്നു, കൂടാതെ Netflix 100-ലധികം ക്ലസ്റ്ററുകൾ ഉപയോഗിക്കുന്നു, 10 നോഡുകൾ ഉൾക്കൊള്ളുന്നു, കൂടാതെ പ്രതിദിനം ഒരു ട്രില്യൺ അഭ്യർത്ഥനകൾ പ്രോസസ്സ് ചെയ്യുന്നു.

കസാന്ദ്ര ഡിബിഎംഎസ് പൂർണ്ണമായും വിതരണം ചെയ്ത ഡൈനാമോ ഹാഷ് സിസ്റ്റം സംയോജിപ്പിക്കുന്നു, ഇത് ഡാറ്റയുടെ അളവ് കൂടുന്നതിനനുസരിച്ച് ഏതാണ്ട് ലീനിയർ സ്കേലബിളിറ്റി നൽകുന്നു. കസാന്ദ്ര ഒരു കോളം ഫാമിലിയെ അടിസ്ഥാനമാക്കിയുള്ള ഒരു ഡാറ്റ സ്റ്റോറേജ് മോഡൽ ഉപയോഗിക്കുന്നു (ColumnFamily), ഇത് memcachedb പോലുള്ള സിസ്റ്റങ്ങളിൽ നിന്ന് വ്യത്യസ്തമാണ്, ഇത് ഒരു കീ/മൂല്യ ശൃംഖലയിൽ മാത്രം ഡാറ്റ സംഭരിക്കുന്നു. ഡാറ്റാബേസുമായുള്ള ഇടപെടൽ ലളിതമാക്കുന്നതിന്, ഘടനാപരമായ അന്വേഷണ ഭാഷയായ CQL (കസാന്ദ്ര അന്വേഷണ ഭാഷ) പിന്തുണയ്ക്കുന്നു, ഇത് SQL-നെ അനുസ്മരിപ്പിക്കുന്നതാണ്, എന്നാൽ പ്രവർത്തനക്ഷമത കുറയുന്നു. നെയിംസ്‌പെയ്‌സുകൾക്കും കോളം ഫാമിലികൾക്കുമുള്ള പിന്തുണയും "ക്രിയേറ്റ് ഇൻഡക്സ്" എക്‌സ്‌പ്രഷൻ ഉപയോഗിച്ച് സൂചികകൾ സൃഷ്ടിക്കുന്നതും സവിശേഷതകളിൽ ഉൾപ്പെടുന്നു.

പരാജയത്തെ പ്രതിരോധിക്കുന്ന സംഭരണം സൃഷ്ടിക്കാൻ DBMS നിങ്ങളെ അനുവദിക്കുന്നു: ഡാറ്റാബേസിൽ സ്ഥാപിച്ചിരിക്കുന്ന ഡാറ്റ ഒരു ഡിസ്ട്രിബ്യൂട്ടഡ് നെറ്റ്‌വർക്കിന്റെ നിരവധി നോഡുകളിലേക്ക് സ്വയമേവ പകർത്തപ്പെടുന്നു, അത് വ്യത്യസ്ത ഡാറ്റാ സെന്ററുകളിൽ വ്യാപിക്കും. ഒരു നോഡ് പരാജയപ്പെടുമ്പോൾ, അതിന്റെ പ്രവർത്തനങ്ങൾ മറ്റ് നോഡുകൾ ഈ ഫ്ലൈയിൽ എടുക്കുന്നു. ക്ലസ്റ്ററിലേക്ക് പുതിയ നോഡുകൾ ചേർക്കുന്നതും കസാന്ദ്ര പതിപ്പ് അപ്‌ഡേറ്റ് ചെയ്യുന്നതും അധിക സ്വമേധയാലുള്ള ഇടപെടലുകളോ മറ്റ് നോഡുകൾ പുനഃക്രമീകരിക്കുകയോ ചെയ്യാതെ ഫ്ലൈയിൽ തന്നെ ചെയ്യപ്പെടും. CQL പിന്തുണയുള്ള ഡ്രൈവറുകൾ Python, Java (JDBC/DBAPI2), Ruby, PHP, C++, JavaScript (Node.js) എന്നിവയ്ക്കായി തയ്യാറാക്കിയിട്ടുണ്ട്.

പ്രധാന കണ്ടുപിടുത്തങ്ങൾ:

• മെച്ചപ്പെട്ട പ്രകടനവും സ്കേലബിളിറ്റിയും. നോഡുകൾക്കിടയിൽ SSTable (ക്രമീകരിച്ച സ്ട്രിംഗ്സ് ടേബിൾ) ഫോർമാറ്റിലുള്ള ഡാറ്റാ എക്സ്ചേഞ്ചിന്റെ കാര്യക്ഷമത മെച്ചപ്പെടുത്തിയിരിക്കുന്നു. ഇന്റർനോഡ് സന്ദേശമയയ്‌ക്കൽ പ്രോട്ടോക്കോൾ ഒപ്റ്റിമൈസ് ചെയ്‌തു. നോഡുകൾക്കിടയിൽ ഡാറ്റ സ്ട്രീമുകൾ കൈമാറുന്നതിന്റെ വേഗത 5 മടങ്ങ് വർദ്ധിച്ചു (പ്രധാനമായും സീറോ കോപ്പി ടെക്നിക്കിന്റെ ഉപയോഗവും മുഴുവൻ എസ്എസ്ടിബിളുകളുടെ കൈമാറ്റവും കാരണം), കൂടാതെ റീഡ് ആൻഡ് റൈറ്റ് പ്രവർത്തനങ്ങൾക്കുള്ള ത്രൂപുട്ട് 25% ആയി വർദ്ധിച്ചു. ഇൻക്രിമെന്റൽ വീണ്ടെടുക്കൽ പ്രക്രിയ ഒപ്റ്റിമൈസ് ചെയ്തു. മാലിന്യ ശേഖരണം താൽക്കാലികമായി നിർത്തിയാൽ ഉണ്ടാകുന്ന കാലതാമസം ഏതാനും മില്ലിസെക്കൻഡുകളായി കുറയുന്നു.
• ഉപയോക്തൃ പ്രാമാണീകരണ പ്രവർത്തനങ്ങളും നടപ്പിലാക്കിയ എല്ലാ CQL അന്വേഷണങ്ങളും ട്രാക്ക് ചെയ്യാൻ നിങ്ങളെ അനുവദിക്കുന്ന ഒരു ഓഡിറ്റ് ലോഗിനുള്ള പിന്തുണ ചേർത്തു.
• ഒരു പൂർണ്ണ ബൈനറി അഭ്യർത്ഥന ലോഗ് നിലനിർത്താനുള്ള കഴിവ് ചേർത്തു, എല്ലാ അഭ്യർത്ഥനയും പ്രതികരണ ട്രാഫിക്കും സംരക്ഷിക്കാൻ നിങ്ങളെ അനുവദിക്കുന്നു. മാനേജ്മെന്റിനായി, “nodetool enablefullquerylog|disablefullquerylog|resetfullquerylog” എന്ന കമാൻഡുകൾ നിർദ്ദേശിക്കപ്പെടുന്നു, കൂടാതെ ലോഗ് വിശകലനത്തിനായി fqltool യൂട്ടിലിറ്റി വിതരണം ചെയ്യുന്നു. ലോഗിനെ റീഡബിൾ ഫോമിലേക്ക് (ഡമ്പ്) പരിവർത്തനം ചെയ്യുന്നതിനും, ആക്റ്റിവിറ്റി സ്ലൈസുകൾ താരതമ്യം ചെയ്യുന്നതിനും (താരതമ്യം ചെയ്യുക), യഥാർത്ഥ ലോഡിൽ അന്തർലീനമായ അവസ്ഥകൾ പുനർനിർമ്മിക്കുന്നതിനുള്ള വിശകലനത്തിനായി വീണ്ടും എക്സിക്യൂട്ട് ചെയ്യുന്നതിനും (റീപ്ലേ) കമാൻഡുകൾ നൽകിയിട്ടുണ്ട്.
• SSTables-ൽ സംഭരിച്ചിരിക്കുന്ന ഡാറ്റയല്ല, എന്നാൽ API വഴിയുള്ള വിവര ഔട്ട്പുട്ട് (പ്രകടന അളവുകൾ, ക്രമീകരണ വിവരങ്ങൾ, കാഷെ ഉള്ളടക്കങ്ങൾ, കണക്റ്റുചെയ്‌ത ക്ലയന്റുകളെക്കുറിച്ചുള്ള വിവരങ്ങൾ മുതലായവ) പ്രതിഫലിപ്പിക്കുന്ന വെർച്വൽ ടേബിളുകൾക്കുള്ള പിന്തുണ ചേർത്തു.
• കംപ്രസ് ചെയ്ത ഡാറ്റ സംഭരണത്തിന്റെ കാര്യക്ഷമത മെച്ചപ്പെടുത്തി, ഡിസ്ക് സ്പേസ് ഉപഭോഗം കുറയ്ക്കുകയും വായനയുടെ പ്രകടനം മെച്ചപ്പെടുത്തുകയും ചെയ്യുന്നു.
• സിസ്റ്റം കീസ്‌പെയ്‌സുമായി ബന്ധപ്പെട്ട ഡാറ്റ (സിസ്റ്റം.*) എല്ലാ ഡാറ്റാ ഡയറക്‌ടറികളിലും വിതരണം ചെയ്യുന്നതിനുപകരം ഡിഫോൾട്ടായി ആദ്യ ഡയറക്‌ടറിയിൽ സ്ഥാപിച്ചിരിക്കുന്നു, ഇത് അധിക ഡിസ്‌കുകളിൽ ഒന്ന് പരാജയപ്പെടുകയാണെങ്കിൽ നോഡ് പ്രവർത്തനക്ഷമമായി തുടരാൻ അനുവദിക്കുന്നു.
• ക്ഷണികമായ പകർപ്പിനും വിലകുറഞ്ഞ കോറങ്ങൾക്കും പരീക്ഷണാത്മക പിന്തുണ ചേർത്തു. താൽക്കാലിക പകർപ്പുകൾ എല്ലാ ഡാറ്റയും സംഭരിക്കുന്നില്ല കൂടാതെ പൂർണ്ണമായ പകർപ്പുകളുമായി പൊരുത്തപ്പെടുന്നതിന് ഇൻക്രിമെന്റൽ പുനഃസ്ഥാപിക്കൽ ഉപയോഗിക്കുന്നു. ലൈറ്റ് കോറങ്ങൾ റൈറ്റ് ഒപ്റ്റിമൈസേഷൻ നടപ്പിലാക്കുന്നു, അതിൽ മതിയായ പൂർണ്ണമായ പകർപ്പുകൾ ലഭ്യമാകുന്നതുവരെ താൽക്കാലിക പകർപ്പുകളിലേക്ക് എഴുതുന്നില്ല.
• ജാവ 11-ന് പരീക്ഷണാത്മക പിന്തുണ ചേർത്തു.
• എല്ലാ മെർക്കിൾ ട്രീകളെയും താരതമ്യം ചെയ്യാൻ പരീക്ഷണാത്മക ഓപ്ഷൻ ചേർത്തു. ഉദാഹരണത്തിന്, ഒരു 3-നോഡ് ക്ലസ്റ്ററിലെ ഓപ്ഷൻ പ്രവർത്തനക്ഷമമാക്കുന്നത്, അതിൽ രണ്ട് പകർപ്പുകൾ സമാനവും ഒന്ന് പഴകിയതുമാണ്, നിലവിലെ പകർപ്പിന്റെ ഒരു കോപ്പി ഓപ്പറേഷൻ മാത്രം ഉപയോഗിച്ച് പഴകിയ പകർപ്പിന്റെ അപ്‌ഡേറ്റിന് കാരണമാകും.
• നിലവിലെ ടൈംസ്റ്റാമ്പ്, നിലവിലെ തീയതി, നിലവിലെ സമയം, നിലവിലെ ടൈംയുയുഐഡി എന്നീ പുതിയ ഫംഗ്‌ഷനുകൾ ചേർത്തു.
• CQL അന്വേഷണങ്ങളിലെ ഗണിത പ്രവർത്തനങ്ങൾക്കുള്ള പിന്തുണ ചേർത്തു.
• "ടൈംസ്റ്റാമ്പ്"/"തീയതി", "ദൈർഘ്യം" എന്നീ തരങ്ങൾ ഉപയോഗിച്ച് ഡാറ്റയ്ക്കിടയിൽ ഗണിത പ്രവർത്തനങ്ങൾ നടത്താനുള്ള കഴിവ് നൽകിയിരിക്കുന്നു.
• വീണ്ടെടുക്കലിന് ആവശ്യമായ ഡാറ്റ സ്ട്രീമുകൾ പ്രിവ്യൂ ചെയ്യുന്നതിനുള്ള ഒരു മോഡ് ചേർത്തു (nodetool നന്നാക്കൽ -പ്രിവ്യൂ), പുനഃസ്ഥാപിക്കുന്ന ഡാറ്റയുടെ സമഗ്രത പരിശോധിക്കാനുള്ള കഴിവ് (nodetool repair -validate).
• SELECT അന്വേഷണങ്ങൾക്ക് ഇപ്പോൾ മാപ്പ് പ്രോസസ്സ് ചെയ്യാനും ഘടകങ്ങൾ സജ്ജമാക്കാനുമുള്ള കഴിവുണ്ട്.
• മെറ്റീരിയലൈസ്ഡ് കാഴ്‌ചകളുടെ പ്രാരംഭ നിർമ്മാണ ഘട്ടം സമാന്തരമാക്കുന്നതിനുള്ള പിന്തുണ ചേർത്തു (cassandra.yaml:concurrent_materialized_view_builders).
• "nodetool cfstats" കമാൻഡ് ചില മെട്രിക്കുകൾ പ്രകാരം അടുക്കുന്നതിനും പ്രദർശിപ്പിച്ചിരിക്കുന്ന വരികളുടെ എണ്ണം പരിമിതപ്പെടുത്തുന്നതിനുമുള്ള പിന്തുണ ചേർത്തു.
• ചില ഡാറ്റാ സെന്ററുകളിലേക്ക് മാത്രം ഉപയോക്താവിന്റെ കണക്ഷൻ പരിമിതപ്പെടുത്തുന്നതിനുള്ള ക്രമീകരണങ്ങൾ നൽകിയിരിക്കുന്നു.
• സ്നാപ്പ്ഷോട്ട് സൃഷ്‌ടിക്കലിന്റെയും ക്ലിയറിംഗ് പ്രവർത്തനങ്ങളുടെയും തീവ്രത (നിരക്ക് പരിധി) പരിമിതപ്പെടുത്താനുള്ള കഴിവ് ചേർത്തു.
• cqlsh ഉം cqlshlib ഉം ഇപ്പോൾ Python 3-നെ പിന്തുണയ്ക്കുന്നു (Python 2.7 ഇപ്പോഴും പിന്തുണയ്ക്കുന്നു).
• വിൻഡോസ് പ്ലാറ്റ്‌ഫോമിനുള്ള പിന്തുണ നിർത്തലാക്കി. വിൻഡോസിൽ കസാന്ദ്ര പ്രവർത്തിപ്പിക്കുന്നതിന്, WSL2 സബ്സിസ്റ്റം (ലിനക്സ് 2-നുള്ള വിൻഡോസ് സബ്സിസ്റ്റം) അല്ലെങ്കിൽ വിർച്ച്വലൈസേഷൻ സിസ്റ്റങ്ങളുടെ അടിസ്ഥാനത്തിൽ സൃഷ്ടിച്ച ലിനക്സ് എൻവയോൺമെന്റുകൾ ഉപയോഗിക്കാൻ ശുപാർശ ചെയ്യുന്നു.

അവലംബം: opennet.ru