DuckDB 0.10.0-ის გამოშვება, SQLite ვარიანტი ანალიტიკური მოთხოვნებისთვის

წარმოდგენილია DuckDB 0.10.0 DBMS-ის გამოშვება, რომელიც აერთიანებს SQLite-ის ისეთ თვისებებს, როგორიცაა კომპაქტურობა, ჩაშენებული ბიბლიოთეკის სახით დაკავშირების შესაძლებლობა, მონაცემთა ბაზის ერთ ფაილში შენახვა და მოსახერხებელი CLI ინტერფეისი, ინსტრუმენტებითა და შესრულების ოპტიმიზაციით. ანალიტიკური მოთხოვნები, რომელიც მოიცავს შენახული მონაცემების მნიშვნელოვან ნაწილს, მაგალითად, რომელიც აერთიანებს ცხრილების მთელ შინაარსს ან აერთიანებს რამდენიმე დიდ ცხრილს. პროექტის კოდი განაწილებულია MIT ლიცენზიით. განვითარება ჯერ კიდევ ექსპერიმენტული გამოშვებების ფორმირების ეტაპზეა, რადგან შენახვის ფორმატი ჯერ არ არის სტაბილიზირებული და იცვლება ვერსიიდან ვერსიამდე.

DuckDB გთავაზობთ გაფართოებულ SQL დიალექტს, რომელიც მოიცავს დამატებით შესაძლებლობებს ძალიან რთული და შრომატევადი მოთხოვნების დასამუშავებლად. მხარდაჭერილია რთული ტიპების გამოყენება (მასივები, სტრუქტურები, გაერთიანებები) და თვითნებური და ჩადგმული კორელაციური ქვემოკითხვების შესრულების შესაძლებლობა. იგი მხარს უჭერს რამდენიმე მოთხოვნის ერთდროულად გაშვებას, შეკითხვებს პირდაპირ CSV და პარკეტის ფაილებიდან. შესაძლებელია იმპორტი PostgreSQL DBMS-დან.

SQLite-ის ჭურვის კოდის გარდა, პროექტი იყენებს PostgreSQL-ის პარსერს ცალკე ბიბლიოთეკაში, Date Math კომპონენტს MonetDB-დან, ფანჯრის ფუნქციების საკუთარ განხორციელებას (სეგმენტის ხეების აგრეგაციის ალგორითმზე დაფუძნებული), რეგულარული გამოხატვის პროცესორს დაფუძნებული RE2 ბიბლიოთეკა, საკუთარი შეკითხვის ოპტიმიზატორი და MVCC კონტროლის მექანიზმი ამოცანების ერთდროული შესრულება (Multi-Version Concurrency Control), ასევე ვექტორიზებული შეკითხვის შესრულების ძრავა Hyper-Pipelining Query Execution ალგორითმზე დაფუძნებული, რომელიც იძლევა მნიშვნელობების დიდი ნაკრების საშუალებას. დამუშავება ერთდროულად ერთ ოპერაციაში.

ახალ გამოშვებაში ცვლილებებს შორის:

• CSV ფორმატში მონაცემების ანალიზის შესრულება მნიშვნელოვნად გაუმჯობესდა. მაგალითად, ახალ ვერსიაში CSV ფაილის წაკითხვა 11 მილიონი მწკრივით შემცირდა 2.6 წამიდან. 1.15 წამამდე და „SELECT COUNT(*)“ ოპერაციის შესრულება CSV ფაილის თავზე 1.8 წამიდან. 0.3 წმ-მდე.
• დამატებულია მხარდაჭერა ფიქსირებული ზომის მასივებისთვის, რომლებიც წააგავს სიებს, რომლებიც შეიცავს ელემენტების ფიქსირებულ რაოდენობას (“CREATE TABLE vectors(v DOUBLE[3]);”).
• დამატებულია მხარდაჭერა MySQL, PostgreSQL და SQLite DBMS-თან დასაკავშირებლად, რომელიც საშუალებას გაძლევთ ჩატვირთოთ მონაცემები გარე DBMS-დან DuckDB-ში და გადაიტანოთ ისინი სხვადასხვა სისტემებს შორის. გარე მონაცემთა ბაზებზე წვდომა ხდება სტანდარტული ცხრილების გამოყენებით. მიამაგრეთ 'postgres:dbname=postgresscanner' AS postgres; აირჩიეთ სათაური, გამოშვების_წელი, სიგრძე FROM postgres.film LIMIT 5;
• დაემატა მხარდაჭერა გამოხატვის „COMMENT ON“ მონაცემთა ბაზაში ობიექტის შესახებ კომენტარის შესანახად.
• დამატებულია მხარდაჭერა გამოთქმისთვის "COPY FROM DATABASE" მთელი კონტენტის ერთი მონაცემთა ბაზიდან მეორეში კოპირებისთვის.
• დამატებულია მხარდაჭერა "ALL" მოდიფიკატორისთვის EXCEPT და INTERSECT გამონათქვამებში.
• განხორციელებული ტიპი »
  
  წყარო: opennet.ru