ডাকডিবি ১.২.০ রিলিজ

DuckDB 1.2.0, একটি DBMS যা বিশ্লেষণাত্মক প্রশ্ন সম্পাদনের উপর দৃষ্টি নিবদ্ধ করে এবং ধারণাগতভাবে SQLite-এর মতো, প্রকাশিত হয়েছে। DuckDB SQLite-এর কম্প্যাক্ট সাইজ, প্লাগেবল লাইব্রেরি, সিঙ্গেল-ফাইল ডাটাবেস স্টোরেজ এবং CLI ইন্টারফেসকে বিশ্লেষণাত্মক কোয়েরি চালানোর জন্য ক্ষমতা এবং অপ্টিমাইজেশনের সাথে একত্রিত করে যা সঞ্চিত ডেটার একটি বৃহৎ অংশকে বিস্তৃত করে, যেমন টেবিলের সম্পূর্ণ বিষয়বস্তু একত্রিত করা বা বেশ কয়েকটি বড় টেবিল একত্রিত করা। প্রকল্প কোডটি C++ তে লেখা এবং MIT লাইসেন্সের অধীনে বিতরণ করা হয়।

DuckDB SQL ভাষার একটি বর্ধিত উপভাষা প্রদান করে যা অত্যন্ত জটিল এবং দীর্ঘস্থায়ী প্রশ্নগুলি পরিচালনা করার জন্য অতিরিক্ত ক্ষমতা অন্তর্ভুক্ত করে। জটিল প্রকার (অ্যারে, কাঠামো, ইউনিয়ন) ব্যবহার করা সম্ভব, সেইসাথে ইচ্ছামত এবং নেস্টেড কোরিলেটেড সাবকোয়েরিগুলি কার্যকর করা সম্ভব। একাধিক প্রশ্নের একযোগে সম্পাদন, CSV এবং Parquet ফাইল থেকে সরাসরি প্রশ্নের সম্পাদন সমর্থিত। PostgreSQL DBMS থেকে আমদানির জন্য সমর্থন উপলব্ধ।

এই প্রকল্পে SQLite থেকে একটি শেল, PostgreSQL থেকে একটি পার্সার, MonetDB থেকে একটি ডেট ম্যাথ উপাদান, উইন্ডো ফাংশনের নিজস্ব বাস্তবায়ন (সেগমেন্ট ট্রি অ্যাগ্রিগেশন অ্যালগরিদমের উপর ভিত্তি করে), RE2 লাইব্রেরির উপর ভিত্তি করে একটি নিয়মিত এক্সপ্রেশন প্রসেসর, নিজস্ব কোয়েরি অপ্টিমাইজার, একযোগে কার্য সম্পাদন পরিচালনার জন্য একটি MVCC প্রক্রিয়া (মাল্টি-ভার্সন কনকারেন্সি কন্ট্রোল) এবং হাইপার-পাইপলাইনিং কোয়েরি এক্সিকিউশন অ্যালগরিদমের উপর ভিত্তি করে একটি ভেক্টরাইজড কোয়েরি এক্সিকিউশন ইঞ্জিন ব্যবহার করা হয়েছে, যা একটি অপারেশনে বৃহৎ মান প্রক্রিয়া করার অনুমতি দেয়।

নতুন বিশ্বে:

• নতুন কম্প্রেশন পদ্ধতির জন্য সাপোর্ট যুক্ত করা হয়েছে। DuckDB-এর পূর্ববর্তী সংস্করণগুলির সাথে ডাটাবেস ফাইলগুলির সামঞ্জস্যতা বজায় রাখার জন্য এগুলি ডিফল্টরূপে সক্রিয় করা থাকে না। উন্নত ডাটাবেস ফাইল ফরম্যাট ব্যবহার করার জন্য, ডাটাবেসকে একটি সংস্করণ নম্বরের সাথে যুক্ত করার সুবিধা চালু করা হয়েছে: একটি ফাইল খোলার সময়, আপনি এখন "STORAGE_VERSION" প্যারামিটার ব্যবহার করে সর্বনিম্ন সমর্থিত ডাটাবেস সংস্করণ নির্দিষ্ট করতে পারেন ("ATTACH 'file.db' (STORAGE_VERSION 'v1.2.0');")। নতুন ফরম্যাটটিকে পুরানো ফরম্যাটে রূপান্তর করতে, আপনি COPY SQL কমান্ড ব্যবহার করতে পারেন, উদাহরণস্বরূপ: ATTACH 'file1.db'; ATTACH 'converted_file.db' (STORAGE_VERSION 'v1.0.0'); COPY FROM DATABASE file1 TO converted_file;
• বিদ্যমান টেবিলে প্রাইমারি কী যোগ করার জন্য "ALTER TABLE … ADD PRIMARY KEY" SQL কমান্ডটির সমর্থন যোগ করা হয়েছে।
• একটি সীমাবদ্ধতা সরানো হয়েছে যা একটি অনন্য ট্র্যাকিং ইনডেক্স সহ আইডেন্টিফায়ারগুলিকে পুনরায় যুক্ত করতে বাধা দিত, যদি বর্তমান লেনদেনে সেই আইডেন্টিফায়ারগুলি ড্রপ করা হয়ে থাকে। উদাহরণস্বরূপ, নিম্নলিখিত SQL আর কোনো ত্রুটি তৈরি করে না: CREATE TABLE students (id INTEGER PRIMARY KEY, name VARCHAR); INSERT INTO students VALUES (1, 'John Doe'); BEGIN; DELETE FROM students WHERE id = 1; INSERT INTO students VALUES (1, 'Jane Doe');
• ল্যাটিন-১ এবং ইউটিএফ-১৬ এনকোডিং-এ CSV ফাইল লোড করার সুবিধা যোগ করা হয়েছে (পূর্বে শুধুমাত্র ইউটিএফ-৮ এনকোডিং সমর্থিত ছিল)। FROM read_csv('cities-latin-1.csv', encoding = 'latin-1');
• CSV ফাইলে মাল্টি-বাইট ডিলিমিটার (৪ বাইট পর্যন্ত) ব্যবহারের সুবিধা যোগ করা হয়েছে, যা আপনাকে কলাম বিভাজক হিসেবে ইমোজি নির্দিষ্ট করার সুযোগ দেয়। a🦆b hello🦆world FROM read_csv('example.dsv', sep = '🦆');
• ডিফল্টরূপে, CSV ফাইলের জন্য স্ট্রিক্ট পার্সিং মোড সক্রিয় থাকে ("strict_mode = true"), যা পরীক্ষা করে দেখে যে ফরম্যাটিং RFC 4180 স্পেসিফিকেশন মেনে চলছে কিনা। স্ট্রিক্ট মোডে, লাইন আলাদা করার জন্য শুধুমাত্র একটি অক্ষর ব্যবহারের অনুমতি রয়েছে, যার ফলে এমন ফাইল পার্স করার চেষ্টা করার সময় একটি ত্রুটি দেখা দেবে যেখানে লাইন আলাদা করার জন্য লাইন ফিড ক্যারেক্টার এবং ক্যারেজ রিটার্ন ক্যারেক্টার ("\r\n") উভয়ই ব্যবহৃত হয়।
• CSV পার্সারটি একটি নতুন নিউলাইন শনাক্তকরণ অ্যালগরিদম ব্যবহার করে যা সমান্তরাল অপারেশন সমর্থন করে। এই নতুন অ্যালগরিদমটি CSV পার্সিংয়ের গতি প্রায় ১৫% বাড়িয়েছে।
• CSV ফাইলের লাইন সাইজের সীমাবদ্ধতা তুলে দেওয়া হয়েছে (পূর্বে একটি লাইনের সাইজ ৮ মেগাবাইটের বেশি হতে পারত না)।
• পার্কেট ফরম্যাটে ডেটা এক্সপোর্ট করার সময় হ্যাশ (ডিকশনারি) এবং ব্লুম ফিল্টার-ভিত্তিক ইনডেক্সের জন্য সাপোর্ট যুক্ত করা হয়েছে। DELTA_BINARY_PACKED কম্প্রেশন পদ্ধতিটি প্রয়োগ করা হয়েছে, যা পার্কেট ফাইলের আকার উল্লেখযোগ্যভাবে কমিয়ে দেয়।
• কমান্ড লাইন ইন্টারফেসে একটি সেফ মোড যুক্ত করা হয়েছে, যা "-safe" অপশন অথবা ".safe_mode" কমান্ড ব্যবহার করে সক্রিয় করা যায়। এই মোডে শুধুমাত্র প্রাথমিকভাবে নির্দিষ্ট করা ডাটাবেস ফাইলটি অ্যাক্সেস করা যায় এবং অন্য ফাইল খোলার চেষ্টা করলে একটি ত্রুটি দেখা দেবে।
• কমান্ড লাইন ইন্টারফেসে অটোকমপ্লিশন উন্নত করা হয়েছে। অটোকমপ্লিশন কোডটিকে পিইজি (পার্সিং এক্সপ্রেশন গ্রামার) ব্যবহারের জন্য রূপান্তর করা হয়েছে।
• কমান্ড লাইন ইন্টারফেসে কমান্ড কার্যকর করার সময় বড় সংখ্যাগুলোর দৃশ্যমান প্রদর্শনের ব্যবস্থা করা হয়েছে; উদাহরণস্বরূপ, 100000000 সংখ্যাটি দেখানোর সময়, এর সাথে অতিরিক্তভাবে “(100 মিলিয়ন)” যোগ করা হবে।
• SQL এখন এমন একটি সিনট্যাক্স সমর্থন করে যেখানে "expression AS name" সিনট্যাক্স ব্যবহার না করে, যে ভ্যালুগুলোকে নির্দেশ করা হয় সেগুলোর আগে টেবিল এবং এক্সপ্রেশনের সংক্ষিপ্ত নাম উল্লেখ করা যায়: SELECT e1: some_long_and_winding_expression, e2: t2.a_column_name FROM t1: long_schema.some_long_table_name, t2: short_s.tbl;
• "SELECT" কমান্ড এখন "RENAME" অপারেশন সমর্থন করে, যা "*" এক্সপ্রেশন নির্দিষ্ট করা হলে আউটপুট হওয়া ফিল্ডগুলির নাম পরিবর্তন করতে ব্যবহৃত হয়: SELECT * RENAME (col1 AS new_col1) FROM integers;
• "SELECT" কমান্ডটি "*" এর মাধ্যমে আউটপুট করার সময় "LIKE" এবং "SIMILAR TO" অপারেশন ব্যবহারের সুযোগ দেয়: SELECT * LIKE 'val%' FROM key_val;
• ছদ্ম-এলোমেলো সংখ্যা তৈরির মান উন্নত করা হয়েছে।
• কোয়েরি অপটিমাইজার আপগ্রেড করা হয়েছে। TPC-H SF100 বেঞ্চমার্কে পারফরম্যান্স ১৩% বৃদ্ধি পেয়েছে।
• অ্যাড-অন তৈরির জন্য একটি নতুন সি-সদৃশ এপিআই প্রস্তাব করা হয়েছে, যা ব্যবহার করে, উদাহরণস্বরূপ, নতুন অ্যাগ্রিগেট বা টেবিল ফাংশন তৈরি করা যেতে পারে।
• স্ট্যান্ডার্ড সি লাইব্রেরি Musl সহ সিস্টেমগুলির জন্য সমর্থন যোগ করা হয়েছে।

উত্স: opennet.ru