ਮਾਈਕਰੋਸਾਫਟ ਓਪਨ ਸੋਰਸਡ ਗਾਰਨੇਟ ਸਟੋਰੇਜ Redis ਨਾਲ ਅਨੁਕੂਲ ਹੈ

Компания Microsoft открыла исходные тексты NoSQL-системы Garnet, рассчитанной на создание кэширующих хранилищ и совместимой с существующими клиентскими библиотеками для хранилища Redis. Garnet поддерживает создание масштабируемых кластеров для кэширования данных, в которых может использоваться репликация, миграция ключей и сегментирование данных между узлами кластера. Проект написан на языке C# с ядром хранения на C++, открыт под лицензией MIT и может работать на всех платформах, поддерживаемых в .NET (первичными платформами заявлены Linux и Windows).

ਡੇਟਾ ਨੂੰ ਸਟੋਰ ਕਰਨ ਲਈ, Tsavorite ਇੰਜਣ (Microsoft FASTER ਸਟੋਰੇਜ ਦਾ ਇੱਕ ਫੋਰਕ) ਵਰਤਿਆ ਜਾਂਦਾ ਹੈ, ਜੋ ਮਲਟੀ-ਥ੍ਰੈਡਡ ਪੁੱਛਗਿੱਛ ਪ੍ਰੋਸੈਸਿੰਗ, ਲੈਣ-ਦੇਣ, ਗੈਰ-ਬਲਾਕਿੰਗ ਮੋਡ (ਚੈੱਕਪੁਆਇੰਟਿੰਗ) ਵਿੱਚ ਤਬਦੀਲੀਆਂ ਕਰਨ, ਅਸਫਲਤਾਵਾਂ ਤੋਂ ਰਿਕਵਰੀ, ਬੇਲੋੜੀਆਂ ਕਾਪੀਆਂ ਨੂੰ ਸੁਰੱਖਿਅਤ ਕਰਨ ਅਤੇ ਇੱਕ ਨੂੰ ਕਾਇਮ ਰੱਖਣ ਦਾ ਸਮਰਥਨ ਕਰਦਾ ਹੈ। ਕਾਰਵਾਈਆਂ ਦਾ ਲੌਗ। ਗਾਰਨੇਟ ਵਿੱਚ ਨੈਟਵਰਕ ਹੈਂਡਲਰ ਸ਼ੈਡੋਫੈਕਸ ਖੋਜ ਪ੍ਰੋਜੈਕਟ ਦੁਆਰਾ ਪ੍ਰਸਤਾਵਿਤ ਸ਼ੇਅਰਡ ਮੈਮੋਰੀ ਆਰਕੀਟੈਕਚਰ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਬਣਾਇਆ ਗਿਆ ਹੈ। TLS ਪ੍ਰੋਸੈਸਿੰਗ ਅਤੇ ਸਟੋਰੇਜ ਦੇ ਨਾਲ ਇੰਟਰਐਕਸ਼ਨ ਇੱਕ ਸਿੰਗਲ ਥਰਿੱਡ ਵਿੱਚ ਕੀਤਾ ਜਾਂਦਾ ਹੈ, ਜੋ ਕਿ ਥ੍ਰੈੱਡਾਂ ਨੂੰ ਬਦਲਣ ਦੇ ਓਵਰਹੈੱਡ ਤੋਂ ਬਚਣਾ ਸੰਭਵ ਬਣਾਉਂਦਾ ਹੈ ਅਤੇ ਨੈੱਟਵਰਕ ਉੱਤੇ ਡਾਟਾ ਟ੍ਰਾਂਸਫਰ ਕਰਨ ਵੇਲੇ CPU ਕੈਸ਼ ਦੀ ਵਧੇਰੇ ਕੁਸ਼ਲਤਾ ਨਾਲ ਵਰਤੋਂ ਕਰਦਾ ਹੈ।

ਗਾਰਨੇਟ ਆਰਕੀਟੈਕਚਰ ਸਟੋਰੇਜ ਓਪਰੇਸ਼ਨਾਂ ਤੋਂ ਬੇਨਤੀਆਂ ਨੂੰ ਪਾਰਸ ਕਰਨ ਅਤੇ ਪ੍ਰੋਸੈਸ ਕਰਨ ਲਈ ਤਰਕ ਨੂੰ ਵੱਖ ਕਰਦਾ ਹੈ। Tsavorite ਲਾਇਬ੍ਰੇਰੀ 'ਤੇ ਆਧਾਰਿਤ ਦੋ ਮੁੱਖ-ਮੁੱਲ ਸਟੋਰਾਂ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਡੇਟਾ ਨੂੰ ਸਟੋਰ ਕੀਤਾ ਜਾਂਦਾ ਹੈ। ਪਹਿਲੇ "ਮੁੱਖ" ਸਟੋਰ ਨੂੰ ਤੇਜ਼ ਸਟ੍ਰਿੰਗ ਓਪਰੇਸ਼ਨਾਂ ਲਈ ਅਨੁਕੂਲ ਬਣਾਇਆ ਗਿਆ ਹੈ, ਅਤੇ ਦੂਜਾ "ਆਬਜੈਕਟ" ਸਟੋਰ ਗੁੰਝਲਦਾਰ ਵਸਤੂਆਂ ਅਤੇ ਐਡਵਾਂਸਡ ਡਾਟਾ ਕਿਸਮਾਂ ਜਿਵੇਂ ਕਿ ਹੈਸ਼ ਅਤੇ ਸੂਚੀਆਂ ਨੂੰ ਅਨੁਕੂਲਿਤ ਕਰਨ ਲਈ ਅਨੁਕੂਲ ਬਣਾਇਆ ਗਿਆ ਹੈ। ਦੂਜੀ ਸਟੋਰੇਜ਼ ਵਿੱਚ ਡਾਟਾ ਕਿਸਮਾਂ ਨੂੰ .NET ਲਾਇਬ੍ਰੇਰੀਆਂ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਲਾਗੂ ਕੀਤਾ ਜਾਂਦਾ ਹੈ। ਡੇਟਾ ਨੂੰ ਹੀਪ (C# ਹੀਪ) 'ਤੇ ਸਟੋਰ ਕੀਤਾ ਜਾਂਦਾ ਹੈ, ਜੋ ਇਸਨੂੰ ਕੁਸ਼ਲਤਾ ਨਾਲ ਅੱਪਡੇਟ ਕਰਨ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ, ਅਤੇ ਡਿਸਕ 'ਤੇ ਲੜੀਬੱਧ ਰੂਪ ਵਿੱਚ।

ਗਾਰਨੇਟ ਦੀਆਂ ਵਿਸ਼ੇਸ਼ਤਾਵਾਂ:

• ਮਲਟੀ-ਟਾਇਰਡ ਸਟੋਰੇਜ, ਸਪੈਨਿੰਗ ਰੈਮ, SSD ਡਰਾਈਵਾਂ ਅਤੇ ਕਲਾਉਡ ਸਟੋਰੇਜ ਨੂੰ ਤੈਨਾਤ ਕਰਨਾ ਸੰਭਵ ਹੈ, ਜਿਸ ਵਿੱਚ ਘੱਟ-ਡਿਮਾਂਡ ਡੇਟਾ ਨੂੰ RAM ਤੋਂ ਵੱਡੇ ਕੈਚ ਬਣਾਉਣ ਲਈ ਹੌਲੀ ਸਟੋਰੇਜ ਵਿੱਚ ਧੱਕਿਆ ਜਾਂਦਾ ਹੈ।
• ਐਕਸਟੈਂਸੀਬਲ ਡਿਵਾਈਸ ਸਪੋਰਟ, ਵੱਖ-ਵੱਖ ਡਿਵਾਈਸਾਂ ਦੇ ਨਾਲ ਕੰਮ ਕਰਨ ਲਈ ਅਨੁਕੂਲਿਤ ਲੇਅਰਾਂ ਦੀ ਸਿਰਜਣਾ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ, ਉਦਾਹਰਨ ਲਈ, SDD, ਹਾਰਡ ਡਰਾਈਵਾਂ ਅਤੇ Azure ਸਟੋਰੇਜ਼ ਕਲਾਉਡ ਸਟੋਰੇਜ ਲਈ ਲੇਅਰ ਹਨ।
• ਰੈਮ ਵਿੱਚ ਖਾਲੀ ਥਾਂ ਦੀ ਮੁੜ ਵਰਤੋਂ ਕਰਨ ਲਈ ਇੱਕ ਕੁਸ਼ਲ ਵਿਧੀ, ਵਿਖੰਡਨ ਨੂੰ ਰੋਕਣਾ।
• ਇੰਡੈਕਸ, ਲੌਗਸ ਅਤੇ ਆਬਜੈਕਟ ਸਟੋਰੇਜ ਲਈ ਵਰਤੀ ਗਈ ਮੈਮੋਰੀ ਦੇ ਆਕਾਰ 'ਤੇ ਸੰਰਚਨਾਯੋਗ ਸੀਮਾਵਾਂ।
• RESP ਪ੍ਰੋਟੋਕੋਲ ਦੀ ਵਰਤੋਂ ਸਟੋਰੇਜ ਤੱਕ ਪਹੁੰਚ ਕਰਨ ਲਈ ਕੀਤੀ ਜਾਂਦੀ ਹੈ, ਜੋ ਗਾਰਨੇਟ ਨੂੰ ਨਾ ਸੋਧੇ ਹੋਏ Redis ਕਲਾਇੰਟਸ ਨਾਲ ਵਰਤਣ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ।
• ਸਟ੍ਰਿੰਗ ਮੁੱਲਾਂ ਅਤੇ ਗੁੰਝਲਦਾਰ ਡੇਟਾ ਢਾਂਚੇ ਜਿਵੇਂ ਕਿ ਸੂਚੀਆਂ, ਹੈਸ਼ਾਂ, ਸੈੱਟਾਂ, ਕ੍ਰਮਬੱਧ ਸੂਚੀਆਂ, ਅਤੇ ਭੂ-ਸਥਾਨ ਡੇਟਾ ਨੂੰ ਸਟੋਰ ਕਰਨ ਦਾ ਸਮਰਥਨ ਕਰਦਾ ਹੈ। ਮੁੱਖ ਜੀਵਨ ਕਾਲ ਨਿਰਧਾਰਤ ਕਰਨ ਦੀ ਸਮਰੱਥਾ.
• ਵਿਸ਼ਲੇਸ਼ਣਾਤਮਕ ਸਵਾਲਾਂ (HLL/ਹਾਈਪਰਲੌਗਲੌਗ, ਬਿਟਮੈਪ), ਟ੍ਰਾਂਜੈਕਸ਼ਨਾਂ (ਮਲਟੀ/ਐਕਸਈਸੀ) ਅਤੇ ਪ੍ਰਕਾਸ਼ਿਤ/ਸਬਸਕ੍ਰਾਈਬ ਪੈਰਾਡਾਈਮ ਦੀ ਵਰਤੋਂ ਕਰਨ ਲਈ API ਦੀ ਉਪਲਬਧਤਾ।
• ACL ਰਾਹੀਂ ਲਚਕਦਾਰ ਪਹੁੰਚ ਨਿਯੰਤਰਣ ਲਈ ਸਾਧਨਾਂ ਦੀ ਉਪਲਬਧਤਾ।
• JSON ਜਾਂ redis.conf ਫਾਰਮੈਟ ਵਿੱਚ ਸੰਰਚਨਾ ਨੂੰ ਪਰਿਭਾਸ਼ਿਤ ਕਰਨ ਦੀ ਸਮਰੱਥਾ।
• ਵਾਧੂ ਨੈੱਟਵਰਕ ਹੈਂਡਲਰਾਂ ਨੂੰ ਕਨੈਕਟ ਕਰਨ ਲਈ ਸਮਰਥਨ। TLS (SslStream 'ਤੇ ਅਧਾਰਤ) ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਟ੍ਰੈਫਿਕ ਨੂੰ ਏਨਕ੍ਰਿਪਟ ਕਰਨ ਦੀ ਸਮਰੱਥਾ।
• C# ਵਿੱਚ ਐਕਸਟੈਂਸ਼ਨਾਂ ਬਣਾਉਣ ਦੀ ਯੋਗਤਾ ਜੋ ਸਟ੍ਰਿੰਗਾਂ ਅਤੇ ਆਬਜੈਕਟਸ ਦੇ ਨਾਲ ਵਾਧੂ ਓਪਰੇਸ਼ਨਾਂ ਨੂੰ ਲਾਗੂ ਕਰਦੇ ਹਨ।
• ਮਲਟੀਪਲ ਕੁੰਜੀਆਂ 'ਤੇ ਫੈਲੀਆਂ ਟ੍ਰਾਂਜੈਕਸ਼ਨਲ ਸਟੋਰ ਕੀਤੀਆਂ ਪ੍ਰਕਿਰਿਆਵਾਂ ਲਈ ਸਮਰਥਨ।
• ਪਹਿਲਾਂ ਸੁਰੱਖਿਅਤ ਕੀਤੀ ਸਥਿਤੀ (ਚੈੱਕਪੁਆਇੰਟ-ਰਿਕਵਰੀ) ਤੋਂ ਰਾਜ ਨੂੰ ਬਹਾਲ ਕਰਨ ਦੀ ਸਮਰੱਥਾ। ਇੱਕ ਜੋੜ-ਸਿਰਫ ਫਾਈਲ ਮੋਡ (AOF, ਸਿਰਫ-ਅਪੈਂਡ-ਫਾਇਲ) ਦੀ ਮੌਜੂਦਗੀ, ਜਿਸ ਵਿੱਚ ਸਾਰਾ ਪੁਰਾਣਾ ਡੇਟਾ ਉਪਲਬਧ ਰਹਿੰਦਾ ਹੈ ਅਤੇ ਬਦਲਿਆ ਨਹੀਂ ਜਾਂਦਾ ਹੈ।
• ਰੀਪਲੀਕੇਸ਼ਨ, ਸ਼ਾਰਡਿੰਗ, ਨੋਡਾਂ ਵਿਚਕਾਰ ਡਾਇਨਾਮਿਕ ਕੁੰਜੀ ਮਾਈਗ੍ਰੇਸ਼ਨ ਅਤੇ ਅਸਫਲ ਨੋਡਾਂ ਦੀ ਰਿਕਵਰੀ ਦੇ ਨਾਲ ਸਟੋਰੇਜ ਕਲੱਸਟਰ ਬਣਾਉਣ ਲਈ ਸਮਰਥਨ।
• ਪੁੱਛਗਿੱਛਾਂ ਨੂੰ ਚਲਾਉਣ ਵੇਲੇ ਉੱਚ ਪ੍ਰਦਰਸ਼ਨ ਅਤੇ ਘੱਟ ਲੇਟੈਂਸੀ। ਵੱਡੀ ਗਿਣਤੀ ਵਿੱਚ ਕਲਾਇੰਟ ਸੈਸ਼ਨਾਂ ਦੇ ਨਾਲ ਛੋਟੇ ਬੈਚ ਪੁੱਛਗਿੱਛਾਂ ਦੀ ਕੁਸ਼ਲ ਪ੍ਰਕਿਰਿਆ, ਥ੍ਰੁਪੁੱਟ (ਪ੍ਰਤੀ ਸਕਿੰਟ ਪ੍ਰਕਿਰਿਆ ਕੀਤੇ ਗਏ ਪੁੱਛਗਿੱਛਾਂ ਦੀ ਗਿਣਤੀ) ਨੂੰ ਮੁਕਾਬਲੇ ਵਾਲੇ ਹੱਲਾਂ ਨਾਲੋਂ ਉੱਚੇ ਪੱਧਰ 'ਤੇ ਪ੍ਰਦਾਨ ਕਰਨ ਦੀ ਆਗਿਆ ਦਿੰਦੀ ਹੈ। ਜਦੋਂ ਚੱਲ ਰਿਹਾ ਹੋਵੇ ਵਰਚੁਅਲ ਮਸ਼ੀਨਾਂ Azure ਕਲਾਉਡ ਵਿੱਚ, ਜ਼ਿਆਦਾਤਰ ਮਾਮਲਿਆਂ ਵਿੱਚ ਕਲਾਇੰਟ ਲੇਟੈਂਸੀ 300 ਮਾਈਕ੍ਰੋਸੈਕਿੰਡ ਤੋਂ ਵੱਧ ਨਹੀਂ ਹੁੰਦੀ। ਕੀਤੇ ਗਏ ਟੈਸਟਾਂ ਵਿੱਚ, ਗਾਰਨੇਟ ਪ੍ਰਦਰਸ਼ਨ ਅਤੇ ਜਵਾਬਦੇਹੀ ਵਿੱਚ Redis, Dragonfly, ਅਤੇ KeyDB ਨੂੰ ਕਾਫ਼ੀ ਪਿੱਛੇ ਛੱਡਦਾ ਹੈ। ਕੁਝ ਟੈਸਟਾਂ ਵਿੱਚ, ਗਾਰਨੇਟ ਮੁਕਾਬਲੇ ਵਾਲੇ ਸਿਸਟਮਾਂ ਨੂੰ ਦਸ ਦੇ ਗੁਣਕ ਨਾਲ ਪਛਾੜਦਾ ਹੈ।

ਸਰੋਤ: opennet.ru