Dragonfly 1.0 väljaanne, süsteem andmete vahemäluks RAM-is

Ilmus andmete vahemälu- ja salvestussüsteem Dragonfly, mis manipuleerib andmetega võtme/väärtuse formaadis ja mida saab kasutada kerge lahendusena kõrge koormusega veebisaitide töö kiirendamiseks, vahemälustades aeglaseid päringuid andmebaasist ja vaheandmeid mälus. Dragonfly toetab protokolle Memcached ja Redis, võimaldades kasutada juba olemasolevaid kliendi raamatukogusid ning kanda projekti, mis kasutab Memcached ja Redis, Dragonfly süsteemi ilma koodi ümbertegemiseta.

Võrreldes Redis'iga, saavutati Dragonfly'ga tüüpiliste koormuste puhul Amazon EC2 c6gn.16xlarge keskkonnas 25-kordne jõudluse suurenemine (3,8 miljonit päringut sekundis). AWS keskkonnas c6gn.16xlarge sai Dragonfly teostada 4,7 korda rohkem kirjutamispäringuid sekundis (3,8 miljonit versus 806 tuhat) ja 1,77 korda rohkem lugemispäringuid sekundis (3,7 miljonit versus 2,1 miljonit).

Dragonfly nõudis 5 GB andmete salvestamise testides 30% vähem mälu kui Redis. Kiirusel „bgsave” tehtud snapshot'ide loomisel kasvab mälu tarbimine, kuid tipphetkedel jääb see peaaegu kolm korda madalamaks kui Redis, samas jällegi snapshot'i kirjutamise operatsioon toimub märgatavalt kiiremini (Dragonfly's tehtud snapshot kirjutati 30 sekundiga, Redis omakorda 42 sekundiga).

Korge jõudlus saavutatakse tänu mitme võtme arhitektuurile ilma ressursside jagamiseta (shared-nothing), mis tähendab, et iga teema jaoks on eraldi isoleeritud töötleja koos oma andmeportsjoniga, töötades ilma mutex'ide ja spin-lockideta. Mitmete võtmete töötlemise aatomilisuse tagamiseks kasutatakse kergkaalu blokke VLL. Informatsiooni tõhusaks salvestamiseks mälus kasutatakse dashtable struktuuri, mis rakendab jaotatud hash-tabelite varianti.

Mõned Dragonfly omadused:

• Cache'i režiim, kus vanad andmed vahetatakse automaatselt uute vastu välja pärast tasuta mälu lõppemist.
• Toetab andmete eluiga, mille jooksul andmed jäävad kehtivaks.
• Toetus taustal salvestamise taastamise jaoks, et seda saaks taastada pärast taaskäivitamist.
• Sisseehitatud HTTP-konsool (töötades TCP-port 6379) süsteemi haldamiseks ja API meetrikate edastamiseks, mis on ühilduv Prometheusega.
• Toetab 185 Redis käsku, mis vastab uue Redis 5 funktsionaalsusele.
• Toetab kõiki Memcached käske, välja arvatud CAS (check-and-set).
• Toetab asünkroonseid operatsioone snapshot'ide loomiseks.
• Mälu tarbimine on ennustatav.
• Kaasas on Lua 5.4 tõlgendaja.
• Toetada keerulisi andmetüüpe nagu hashid, kogud, loendid (ZSET, HSET, LIST, SETS ja STRING) ning JSON-formaadis andmeid.
• Toetada salvestusrepliikimist, et tagada tõrketaluvus ja koormuse jaotus.

Dragonfly kood on kirjutatud keeltes C/C++ ja levitatakse BSL (Business Source License) litsentsi alusel. BSL litsentsi pakkusid MySQLi kaasasutajad alternatiivina Open Core mudelile. BSL põhimõte on see, et laiendatud funktsionaalsuse kood on algselt muutmiseks saadaval, kuid teatud aja jooksul võib seda tasuta kasutada ainult täiendavate tingimuste järgimise korral, mille möödasõiduks on vaja osta kommertslitsents. Dragonfly projekti täiendavad litsentsitingimused keelavad koodi kasutamise kuni 15. märtsini 2028, mil kood muudetakse Apache 2.0 litsentsi alla. Kuni selle ajani lubatakse koodi kasutada ainult oma teenuste ja toodete toimimiseks, kuid keelatakse selle kasutamine tasuliste pilveteenuste loomiseks, mis põhinevad Dragonflyl.

Dragonfly versioon 1.0 on märkimisväärne andmereplikatsiooni toe elluviimise poolest. serverile teisejärgseks. Dragonfly on võimalik seadistada kasutama teisejärgse salvestusena, mis võtab andmeid esimesest serverist nii Dragonfly baasil kui ka Redis baasil. Replikatsiooni haldamise API on ühilduv Redisiga ja põhineb käskude ROLE ja REPLICAOF (SLAVEOF) rakendamisel.

Allikas: opennet.ru