DBMS SQLite 3.42 এবং DuckDB 0.8.0 এর রিলিজ। SQLite-এর জন্য সঞ্চিত পদ্ধতির বাস্তবায়ন সহ CG/SQL

SQLite 3.42 এর রিলিজ, একটি প্লাগ-ইন লাইব্রেরি হিসাবে ডিজাইন করা একটি লাইটওয়েট DBMS, প্রকাশিত হয়েছে। SQLite কোড সর্বজনীন ডোমেনে বিতরণ করা হয়, যেমন সীমাবদ্ধতা ছাড়াই ব্যবহার করা যেতে পারে এবং যেকোন উদ্দেশ্যে বিনামূল্যে ব্যবহার করা যেতে পারে। SQLite ডেভেলপারদের জন্য আর্থিক সহায়তা একটি বিশেষভাবে তৈরি কনসোর্টিয়াম দ্বারা সরবরাহ করা হয়, যার মধ্যে Adobe, Oracle, Mozilla, Bentley এবং Bloomberg এর মতো কোম্পানি রয়েছে।

অব্যবস্থাপনা:

• FTS5 পূর্ণ-পাঠ্য সূচীগুলির জন্য, সুরক্ষিত-মুছুন কমান্ড প্রয়োগ করা হয়, যা মুছে ফেলার পরে সমস্ত অবশিষ্ট ডেটা সম্পূর্ণরূপে পরিষ্কার করে।
• JSON ফর্ম্যাটে ডেটা প্রক্রিয়াকরণের ফাংশনগুলি এখন JSON5 এক্সটেনশনগুলিকে সমর্থন করে৷
• উন্নত ক্যোয়ারী প্ল্যানার। কাউন্ট-অফ-ভিউ অপ্টিমাইজেশান ডিফল্টরূপে সক্ষম। সাবকোয়েরিতে অব্যবহৃত কলামগুলির হ্যান্ডলিং বাদ দেওয়া হয়েছে। উন্নত পুশ-ডাউন অপ্টিমাইজেশান বাস্তবায়ন।
• কিছু বিপজ্জনক কমান্ড যেমন ".testctrl" পরীক্ষায় ব্যবহার করার অনুমতি দিতে CLI-তে "--unsafe-testing" বিকল্প যোগ করা হয়েছে। নিরাপদ মোডে ("--নিরাপদ"), ".লগ অন" এবং ".লগ অফ" কমান্ডগুলি অনুমোদিত৷ "—" বিভাজকের জন্য সমর্থন যোগ করা হয়েছে, আর্গুমেন্টের জন্য যার পরে বিকল্প প্রক্রিয়াকরণ নিষ্ক্রিয় করা হয়। ইনফিনিটি এবং NaN মানের সাথে যুক্ত ":inf" এবং ":nan" প্যারামিটার যোগ করা হয়েছে।
• অ্যাপ্লিকেশন-সংজ্ঞায়িত SQL ফাংশনগুলির নামগুলিকে ক্রস, পূর্ণ, ভিতরের, বাম, প্রাকৃতিক, বাইরের এবং ডান কীওয়ার্ডগুলির সাথে ছেদ করার অনুমতি দেওয়া হয়েছে৷
• প্রসারিত PRAGMA অখণ্ডতা_চেক ক্ষমতা। NOT NULL শর্ত সহ কলামে NaN মান নির্দিষ্ট করার জন্য চেক যোগ করা হয়েছে। ত্রুটি বার্তা উন্নত তথ্য বিষয়বস্তু.
• সেশন সংযোজন ROWID ছাড়াই টেবিল থেকে পরিবর্তনের বাধা দেয়।
• "সাবসেক" সংশোধকটি সেকেন্ডের ভগ্নাংশ ব্যবহার করার জন্য সময় এবং তারিখের সাথে কাজ করার জন্য ফাংশনে যোগ করা হয়েছে।
• 2000 থেকে 1000 পর্যন্ত অ্যারে এবং JSON অবজেক্টের জন্য ডিফল্ট পুনরাবৃত্ত গভীরতা হ্রাস করা হয়েছে।

এছাড়াও, DuckDB 0.8.0 DBMS রিলিজ তৈরি করা হয়েছে, যা SQLite ভেরিয়েন্টের বিকাশ করে, সঞ্চিত ডেটার একটি উল্লেখযোগ্য অংশকে কভার করে বিশ্লেষণাত্মক ক্যোয়ারী করার জন্য বৈশিষ্ট্য এবং অপ্টিমাইজেশন সহ উন্নত করে, উদাহরণস্বরূপ, টেবিলের সম্পূর্ণ বিষয়বস্তু একত্রিত করা বা বেশ কয়েকটি মার্জ করা বড় টেবিল। এসকিউএল ভাষার একটি বর্ধিত উপভাষা প্রদান করা হয়েছে, যার মধ্যে রয়েছে অত্যন্ত জটিল এবং দীর্ঘমেয়াদী প্রশ্নগুলি পরিচালনা করার জন্য অতিরিক্ত ক্ষমতা, সেইসাথে জটিল প্রকারের (অ্যারে, কাঠামো, ইউনিয়ন), একাধিক প্রশ্নের একযোগে সঞ্চালন, এবং সরাসরি থেকে প্রশ্নগুলি সম্পাদন করা CSV, JSON এবং Parquet ফরম্যাটে ফাইল। PostgreSQL DBMS থেকে আমদানি করা সম্ভব।

SQLite থেকে শেল কোড ছাড়াও, প্রকল্পটি PostgreSQL থেকে একটি পার্সার ব্যবহার করে, একটি পৃথক লাইব্রেরিতে সরানো হয়েছে, MonetDB থেকে তারিখ গণিত উপাদান, উইন্ডো ফাংশনগুলির নিজস্ব বাস্তবায়ন (সেগমেন্ট ট্রি অ্যাগ্রিগেশন অ্যালগরিদমের উপর ভিত্তি করে), একটি নিয়মিত এক্সপ্রেশন প্রসেসর। RE2 লাইব্রেরির উপর ভিত্তি করে, এর নিজস্ব ক্যোয়ারী অপ্টিমাইজার, MVCC কন্ট্রোল মেকানিজম একযোগে কার্য সম্পাদন (মাল্টি-ভার্সন কনকারেন্সি কন্ট্রোল), সেইসাথে হাইপার-পাইপলাইনিং কোয়েরি এক্সিকিউশন অ্যালগরিদমের উপর ভিত্তি করে একটি ভেক্টরাইজড কোয়েরি এক্সিকিউশন ইঞ্জিন, যা বড় সেট প্রক্রিয়াকরণের অনুমতি দেয়। এক অপারেশনে একবারে মান। প্রকল্প কোড MIT লাইসেন্সের অধীনে বিতরণ করা হয়।

DuckDB এর নতুন সংস্করণে:

• সারিগুলিকে কলামে রূপান্তরিত করার জন্য নতুন অভিব্যক্তি "PIVOT" এবং "UNPIVOT" যোগ করা হয়েছে এবং এর বিপরীতে।
• ডেটা আমদানি এবং রপ্তানি করার সময় উন্নত সমান্তরালকরণ। ডিফল্টরূপে, Parquet, CSV এবং JSON ফর্ম্যাটগুলি ব্যবহার করার সময় CSV ফর্ম্যাটে ফাইলগুলি থেকে একাধিক স্ট্রীম এবং মাল্টি-থ্রেডেড রাইটিং প্রয়োগ করা হয়৷
• ফাইল পাথ সংজ্ঞায়িত করার সময় ডিরেক্টরির উপর পুনরাবৃত্তিমূলকভাবে পুনরাবৃত্তি করতে "**" অপারেটর যোগ করা হয়েছে (যেমন "'data/glob/crawl/stackoverflow/**/*.csv';") থেকে।
• টাইম সিরিজ (নির্দিষ্ট সময়ের ব্যবধানে প্যারামিটার মানের স্লাইস) আকারে ডেটার জন্য মার্জ অপারেশন (যোগদান) এর জন্য সমর্থন যোগ করা হয়েছে, যেখানে রেকর্ডগুলি মার্জ করার মানদণ্ডটি সঠিক নয়, তবে মানগুলির আনুমানিক মিল সময়ের সাথে একটি ক্ষেত্রে (উদাহরণস্বরূপ, আপনি রেকর্ডগুলি একত্রিত করতে পারেন, সময় যা 1 মিনিটের বেশি নয়)।
• ডাটাবেস মেটাডেটার বিলম্বিত লোডিং কার্যকর করা হয়েছে, যা কয়েক ডজন বার DBMS চালু করার গতি বাড়ানো সম্ভব করেছে।
• পাইথনে কাস্টম ফাংশন সংযোগের জন্য সমর্থন যোগ করা হয়েছে।
• Apache তীর ব্যবহার করে ডেটা স্থানান্তরের জন্য ADBC ​​(Arrow Database Connectivity) API-এর জন্য সমর্থন যোগ করা হয়েছে।
• সুইফট কোডের সাথে ইন্টিগ্রেশনের জন্য বাইন্ডিং প্রয়োগ করা হয়েছে।
• ডিভিশন ("/") অপারেটরের আচরণ পরিবর্তন করা হয়েছে, যা এখন পূর্ণসংখ্যা অপারেশনের পরিবর্তে ডিফল্টরূপে ফ্লোটিং পয়েন্ট গণনা করে। পূর্ণসংখ্যা বিভাগের জন্য একটি নতুন অপারেটর "//" প্রস্তাব করা হয়েছে। "SET integer_division=true;" সেট করে পুরানো আচরণ ফিরিয়ে দেওয়া যেতে পারে।
• বাছাই করার সময় নাল রেকর্ডগুলির জন্য অ্যাকাউন্টিংয়ের পদ্ধতি "NULLS FIRST" থেকে "NULLS LAST" এ পরিবর্তিত হয়েছে, অর্থাৎ NULL মানগুলি এখন তালিকার শুরুর পরিবর্তে শেষে প্রদর্শিত হবে। "SET default_null_order='nulls_first';" সেট করে পুরানো আচরণ পুনরুদ্ধার করা যেতে পারে।

উপরন্তু, Facebook দ্বারা বিকাশিত CG/SQL প্রকল্প, যা SQLite-এর সাথে সঞ্চিত পদ্ধতি ব্যবহার করার জন্য একটি কোড জেনারেটর প্রদান করে, উল্লেখ করা যেতে পারে। CG/SQL আপনাকে T-SQL (Transact-SQL) এর একটি বিশেষ উপভাষায় সঞ্চিত পদ্ধতিগুলি ডিজাইন করতে দেয়, যা আপনাকে স্ট্যান্ডার্ড C লাইব্রেরির ফাংশনগুলি কল করতে এবং SQLite-এ ডেটা অ্যাক্সেস করতে দেয়। উৎপন্ন সঞ্চিত পদ্ধতিগুলি সি কোডে কম্পাইল করা হয় যা নির্দিষ্ট ক্রিয়া সম্পাদন করতে এবং জটিল প্রশ্নগুলি প্রক্রিয়া করতে SQLite C API ব্যবহার করে। সংকলিত সঞ্চিত পদ্ধতিগুলি সি, জাভা এবং অবজেক্টিভ-সি প্রোগ্রামগুলির সাথে লিঙ্ক করা যেতে পারে। প্রকল্পের কোডটি সি তে লেখা এবং এমআইটি লাইসেন্সের অধীনে বিতরণ করা হয়েছে।

উত্স: opennet.ru