Saadaval on sisseehitatud salvestusmootor TidesDB 1.0, mis toetab ACID-tehinguid

Avaldati projekti TidesDB esimene stabiilne väljaanne, mis arendab andmete salvestamise teeki võtme/väärtuse formaadis. Projekti saab kasutada nii iseseisva mootorina kui ka rakendustesse integreerimiseks. Peamisteks omadusteks on ACID-tehingute toimetamine ja tõhus andmesalvestus Flash-mäluseadmetes ja mälus. Kood on kirjutatud C keeles ja levitatakse MPL 2.0 litsentsi all. Raamatukogud on valmis keeltele C++, Go, Java, Python, Rust, Lua ja JavaScript.

Andmete salvestamiseks kasutatakse LSM-tree (log-struktureeritud puu koos liitmisega) struktuuri, mis tagab kõrgem tootlikkus mitte ainult lugemise, vaid ka andmete kirjutamise ja muutmise operatsioonide täitmise. Lugemise operatsioonid ei blokeeri andmete kirjutamist ja lugemist, samas kui kirjutamise operatsioonid blokeerivad ainult veeru perekonna, milles kirjutamine toimub. Lisakiirusete saavutamiseks toetatakse indekseerimist ja bloom-filtrite põhjal põhinevat vahemälu (mis võimaldavad kontrollida kuuluvust kogusse, lubades vale määramine mitteolevatest elementidest, kuid välistades olemasoleva elemendi vahelejätmise).

On täielik ACID-tehingute toetus, mis võimaldab atomaarseid muudatusi, mis katab veeru perekonnad, ja vajaduse korral atomaarset tagasi pöörduda operatsioonidega. Andmeid saab salvestada komprimeeritud kujul, valides kompressioonialgoritmi veeru perekonna kohaselt. Võimalik on seada lukke üksikute veeru perekondade tasemele ja salvestuse pakkimist paralleelselt ilma DB-operatsioonide täitmise blokeerimiseta.

Põhifunktsioonid:

• Veeru perekondade (Column Families) toetus — isoleeritud andmekogumid võtme/väärtuse formaadis. Iga veeru perekonna jaoks kasutatakse oma memtable, SSTable ja WAL-logi.
• ACID-tehingud, mis katavad mitu operatsiooni veeru perekondades.
• Optimeerimine andmete paralleelsele juurdepääsule.
• Toetatakse kahepoolsed iteratsioonid, mis võimaldavad võtme/väärtuse paare edasi või tagasi käia valitud positsiooni suhtes salvestuses, kasutades algselt määratud sorteerimismeetodit.
• Toetatakse oma võrdlusfunktsioonide lisamist võtmetele. Sisseehitatud võrdlusfunktsioonide olemasolu: memcmp, string ja numeeriline.
• Tegevuslogi (WAL, Write-Ahead Log) haldamine ja memtable (mälus hoidmine) automaatne taastamine antud logist käivitamisel.
• Bloom-filterite kasutamine, et minimeerida juurdepääsu salvestusse, kontrollides võtme olemasolu enne SSTable'ist lugemist (püsiv salvestus).
• Tugialgoritmide Snappy, LZ4 ja ZSTD toetus, et tihendada kirjeid SSTable'is ja WAL-logis.
• Võimalus määrata kirjete eluea aeg (TTL) ja automaatne aegunud kirjete eemaldamine.
• Kolm režiimi andmete sünkroonimiseks RAM-is püsivasse salvestusse: NONE (kiireim), BACKGROUND (tasakaalustatud), FULL (kõige usaldusväärsem).
• Võimalus määrata memtable'i suurus, tihendusmeetodid, bloom-filterid, sünkroniseerimisrežiim ja pakendamise parameetrid iga veergude perekonna jaoks.
• Lihtne C API, mis tagastab 0, kui tehing on õnnestunud ja -1, kui tekib viga.
• SBHA (Sorted Binary Hash Array) kasutamine, et kiirendada andmete leidmist SSTable'is, võimaldades määrata blokeeringute offset'e võtmete ilma täieliku skaneerimiseta.
• Kompaktne ja ülekantav binaarvorming andmebaasi esitlemiseks, mis toetab versioonimist.
• Sisseehitatud mehhanismid andmete terviklikkuse kontrollimiseks, kahjustuste tuvastamiseks ja taastamiseks.

Allikas: opennet.ru