Dragonfly 1.0-ის გამოშვება, RAM-ში მონაცემების ქეშირების სისტემა

გამოვიდა Dragonfly მეხსიერების ქეშირებისა და შენახვის სისტემა, რომელიც მანიპულირებს მონაცემებს გასაღების/მნიშვნელობის ფორმატში და შეიძლება გამოყენებულ იქნას როგორც მსუბუქი გადაწყვეტა ძლიერ დატვირთული საიტების მუშაობის დასაჩქარებლად, ნელი მოთხოვნების ქეშირებისთვის DBMS-ში და შუალედურ მონაცემებში RAM-ში. Dragonfly მხარს უჭერს Memcached და Redis პროტოკოლებს, რაც საშუალებას გაძლევთ გამოიყენოთ არსებული კლიენტების ბიბლიოთეკები და გადაიტანოთ პროექტები Memcached-ის და Redis-ის გამოყენებით Dragonfly-ზე კოდის გადამუშავების გარეშე.

Redis-თან შედარებით, Dragonfly-მა მიაღწია შესრულების 2-ჯერ გაზრდას (6 მილიონი მოთხოვნა წამში) ტიპიური დატვირთვისთვის Amazon EC16 c25gn.3.8xlarge გარემოში. Memcached-თან შედარებით AWS c6gn.16xlarge გარემოში, Dragonfly-ს შეეძლო შეესრულებინა 4.7-ჯერ მეტი ჩაწერის მოთხოვნა წამში (3.8 მილიონი 806 ათასის წინააღმდეგ) და 1.77-ჯერ მეტი წაკითხვის მოთხოვნა წამში (3.7 მილიონი 2.1 მილიონის წინააღმდეგ).

5 გბ მონაცემთა შენახვის ტესტებში Dragonfly-ს 30%-ით ნაკლები მეხსიერება სჭირდებოდა, ვიდრე Redis. სნეპშოტების შექმნისას "bgsave" ბრძანებით, მეხსიერების მოხმარება იზრდება, მაგრამ პიკის მომენტებში ის თითქმის სამჯერ ნაკლები რჩებოდა, ვიდრე Redis-ში, ხოლო სნეპშოტების ჩაწერის ოპერაცია თავისთავად ბევრად უფრო სწრაფია (ტესტში, დრაკონის სურათი დაიწერა 30 წელს. წამში, ხოლო რედისი - 42 წამში).

მაღალი წარმადობა მიღწეულია მრავალ ხრახნიანი არქიტექტურის წყალობით, რესურსების გაზიარების გარეშე (გაზიარებული-არაფერი), რაც ნიშნავს, რომ თითოეულ თემას ენიჭება ცალკეული პროცესორი მონაცემთა საკუთარი ნაწილით, რომელიც მუშაობს mutexes და spin lock-ების გარეშე. ატომურობის უზრუნველსაყოფად მრავალ კლავიშთან მუშაობისას, გამოიყენება მსუბუქი VLL საკეტები. მეხსიერებაში ინფორმაციის ეფექტურად შესანახად გამოიყენება დაშლილი სტრუქტურა, რომელიც ახორციელებს დაყოფილ ჰეშ ცხრილის ტიპს.

Dragonfly-ის ზოგიერთი მახასიათებელი:

• ქეშირების რეჟიმი, რომელიც ავტომატურად ცვლის ძველ მონაცემებს ახალი მონაცემებით თავისუფალი მეხსიერების ამოწურვის შემდეგ.
• მონაცემთა შეერთების მხარდაჭერა მთელი სიცოცხლის განმავლობაში, რომლის განმავლობაშიც მონაცემები რელევანტურად ითვლება.
• მეხსიერების მდგომარეობის დისკზე ჩაქრობის მხარდაჭერა გადატვირთვის შემდეგ მოგვიანებით აღდგენისთვის.
• HTTP კონსოლის არსებობა (აკავშირებს TCP პორტს 6379) სისტემის მართვისთვის და API მეტრიკის დასაბრუნებლად, თავსებადი პრომეთესთან.
• 185 Redis ბრძანებების მხარდაჭერა, რაც დაახლოებით უდრის Redis 5-ის გამოშვების ფუნქციონალურობას.
• მხარს უჭერს ყველა Memcached ბრძანებას CAS-ის გარდა (check-and-set).
• ასინქრონული ოპერაციების მხარდაჭერა სნეპშოტების შესაქმნელად.
• მეხსიერების პროგნოზირებადი მოხმარება.
• ჩაშენებული Lua 5.4 თარჯიმანი.
• მხარს უჭერს მონაცემთა კომპლექსურ ტიპებს, როგორიცაა ჰეშები, კომპლექტები, სიები (ZSET, HSET, LIST, SETS და STRING) და JSON მონაცემები.
• მხარს უჭერს შენახვის რეპლიკაციას შეცდომების ტოლერანტობისა და დატვირთვის დაბალანსებისთვის.

Dragonfly კოდი დაწერილია C/C++-ში და ნაწილდება BSL-ის (ბიზნეს წყაროს ლიცენზიის) ქვეშ. BSL ლიცენზია შემოგვთავაზეს MySQL-ის თანადამფუძნებლებმა, როგორც Open Core მოდელის ალტერნატივა. BSL-ის არსი იმაში მდგომარეობს, რომ მოწინავე ფუნქციონირების კოდი თავდაპირველად ხელმისაწვდომია მოდიფიკაციისთვის, მაგრამ გარკვეული პერიოდის განმავლობაში შეიძლება გამოყენებულ იქნას უფასოდ მხოლოდ იმ შემთხვევაში, თუ დაკმაყოფილებულია დამატებითი პირობები, რომლებიც მოითხოვს კომერციული ლიცენზიის შეძენას. Dragonfly პროექტისთვის ლიცენზიის დამატებითი პირობები მოითხოვს კოდის გადაცემას Apache 2.0 ლიცენზიაზე 15 წლის 2028 მარტს. ამ დრომდე, ლიცენზია საშუალებას აძლევს კოდის გამოყენებას მხოლოდ მისი სერვისებისა და პროდუქტების მუშაობის უზრუნველსაყოფად, მაგრამ კრძალავს გამოყენებას ფასიანი ღრუბლოვანი სერვისების შესაქმნელად, რომლებიც მოქმედებენ როგორც Dragonfly-ის დამატება.

ვერსია Dragonfly 1.0 გამოირჩევა მონაცემთა რეპლიკაციის მხარდაჭერით პირველადი სერვერიდან მეორადზე. თუმცა, Dragonfly შეიძლება იყოს კონფიგურირებული, რომ გამოიყენებოდეს როგორც მეორადი საცავი, რომელიც იღებს მონაცემებს პირველადი სერვერიდან ან Dragonfly-ზე ან Redis-ზე დაფუძნებული. რეპლიკაციის მართვის API თავსებადია Redis-თან და ეფუძნება ROLE და REPLICAOF (SLAVEOF) ბრძანებების გამოყენებას.

წყარო: opennet.ru