DBMS SQLite 3.42 र DuckDB 0.8.0 को रिलीज। SQLite को लागी भण्डारण प्रक्रियाहरु को कार्यान्वयन संग CG/SQL

SQLite 3.42 को रिलीज, एक प्लग-इन पुस्तकालयको रूपमा डिजाइन गरिएको हल्का DBMS, प्रकाशित गरिएको छ। SQLite कोड सार्वजनिक डोमेनमा वितरित गरिन्छ, अर्थात्। कुनै पनि उद्देश्यको लागि प्रतिबन्ध बिना र नि: शुल्क प्रयोग गर्न सकिन्छ। SQLite विकासकर्ताहरूको लागि वित्तीय समर्थन विशेष रूपमा सिर्जना गरिएको कन्सोर्टियमद्वारा प्रदान गरिएको छ, जसमा Adobe, Oracle, Mozilla, Bentley र Bloomberg जस्ता कम्पनीहरू समावेश छन्।

मुख्य परिवर्तनहरू:

• FTS5 पूर्ण-पाठ अनुक्रमणिकाहरूको लागि, सुरक्षित-मेटाउने आदेश लागू गरिएको छ, जसले मेटाए पछि सबै अवशिष्ट डेटा पूर्ण रूपमा खाली गर्दछ।
• JSON डाटा प्रशोधनका लागि कार्यहरूले अब JSON5 विस्तारहरूलाई समर्थन गर्दछ।
• सुधारिएको क्वेरी योजनाकार। पूर्वनिर्धारित रूपमा, काउन्ट-अफ-दृश्य अनुकूलन सक्षम गरिएको छ। सबक्वेरीहरूमा प्रयोग नगरिएका स्तम्भहरूको प्रशोधन हटाइएको छ। पुश-डाउन अप्टिमाइजेसनको सुधारिएको कार्यान्वयन।
• कमाण्ड लाइन इन्टरफेसमा "--असुरक्षित-परीक्षण" विकल्प थपियो, जसले परीक्षणमा प्रयोगको लागि अभिप्रेरित ".testctrl" जस्ता केही खतरनाक आदेशहरू प्रयोग गर्न अनुमति दिन्छ। सुरक्षित मोडमा ("-safe"), ".log on" र ".log off" आदेशहरूको प्रयोगलाई अनुमति छ। "—" परिसीमकको लागि समर्थन थपियो, तर्कहरूको लागि जस पछि विकल्प प्रक्रिया असक्षम गरिएको छ। अनन्तता र NaN मानहरूसँग सम्बन्धित ": inf" र ":nan" प्यारामिटरहरू थपियो।
• अनुप्रयोग-परिभाषित SQL प्रकार्य नामहरूलाई क्रस, पूर्ण, भित्री, बायाँ, प्राकृतिक, बाहिरी, र दायाँ कुञ्जी शब्दहरूसँग ओभरल्याप गर्न अनुमति दिइएको छ।
• PRAGMA integrity_check को क्षमताहरू विस्तार गरिएको छ। NOT NULL अवस्थाको साथ स्तम्भहरूमा NaN मानहरू निर्दिष्ट गर्न जाँच थपियो। त्रुटि सन्देशहरूको सुधारिएको जानकारी सामग्री।
• सत्र एड-अनले ROWID बिना तालिकाहरूबाट परिवर्तनहरू अवरोध गर्न अनुमति दिन्छ।
• "सबसेक" परिमार्जक सेकेन्डको अंशहरू प्रयोग गर्न समय र मितिहरूसँग काम गर्नका लागि कार्यहरूमा थपिएको छ।
• arrays र JSON वस्तुहरूको लागि पूर्वनिर्धारित पुनरावृत्ति गहिराई 2000 बाट 1000 मा घटाइएको छ।

थप रूपमा, DuckDB 0.8.0 DBMS को रिलीज सिर्जना गरिएको छ, जसले SQLite को संस्करणको विकास गर्दछ, भण्डार गरिएको डाटाको महत्त्वपूर्ण भाग कभर गर्ने विश्लेषणात्मक प्रश्नहरू कार्यान्वयन गर्नका लागि क्षमताहरू र अप्टिमाइजेसनहरूको साथ विस्तार गरिएको छ, उदाहरणका लागि, सम्पूर्ण सामग्रीहरूको एकत्रीकरण प्रदर्शन गर्दै। तालिकाहरू वा धेरै ठूला तालिकाहरू मर्ज गर्दै। SQL को एक उन्नत बोली प्रदान गर्दछ जसले धेरै जटिल र समय-उपभोग गर्ने प्रश्नहरू प्रशोधन गर्न थप क्षमताहरू समावेश गर्दछ, र जटिल प्रकारहरू (एरेहरू, संरचनाहरू, युनियनहरू), एकै साथ धेरै प्रश्नहरू चलाउन, र सीधा CSV, JSON, र Parquet फाइलहरूबाट क्वेरीहरू चलाउन समर्थन गर्दछ। । PostgreSQL DBMS बाट आयात गर्न सम्भव छ।

SQLite बाट शेल कोडको अतिरिक्त, परियोजनाले छुट्टै पुस्तकालयमा PostgreSQL बाट पार्सर प्रयोग गर्दछ, MonetDB बाट मिति गणित कम्पोनेन्ट, विन्डो प्रकार्यहरूको आफ्नै कार्यान्वयन (खण्ड ट्री एग्रीगेशन एल्गोरिथ्ममा आधारित), नियमित अभिव्यक्ति प्रोसेसरमा आधारित। RE2 पुस्तकालय, यसको आफ्नै क्वेरी अप्टिमाइजर, र MVCC नियन्त्रण संयन्त्र एक साथ कार्यहरूको कार्यान्वयन (मल्टी-भर्सन कन्करन्सी कन्ट्रोल), साथै हाइपर-पाइपलाइनिङ क्वेरी कार्यान्वयन एल्गोरिदममा आधारित भेक्टराइज्ड क्वेरी कार्यान्वयन इन्जिन, जसले ठूलो सेटहरूलाई अनुमति दिन्छ। एक अपरेशनमा एकै पटक प्रशोधन गर्न। परियोजना कोड MIT लाइसेन्स अन्तर्गत वितरण गरिएको छ।

DuckDB को नयाँ संस्करणमा:

• पङ्क्तिहरूलाई स्तम्भहरूमा रूपान्तरण गर्न र यसको उल्टो "PIVOT" र "UNPIVOT" नयाँ अभिव्यक्तिहरू थपियो।
• डाटा आयात र निर्यात गर्दा सुधारिएको समानान्तर। पूर्वनिर्धारित रूपमा, Parquet, CSV र JSON ढाँचाहरू प्रयोग गर्दा CSV फाइलहरू र बहु-थ्रेडेड लेखनबाट बहु-थ्रेडेड पढाइ लागू गरिन्छ।
• फाइल मार्गहरू निर्धारण गर्दा डाइरेक्टरीहरू मार्फत पुनरावर्ती दोहोर्याउन "**" अपरेटर थपियो (उदाहरणका लागि, FROM "'data/glob/crawl/stackoverflow/**/*.csv';")।
• समय शृङ्खला (निर्दिष्ट समय अन्तरालहरूमा प्यारामिटर मानहरूको स्लाइसहरू) को रूपमा डेटाको लागि मर्ज अपरेशनहरू (जोइन) को लागि समर्थन थपियो, जसमा रेकर्डहरू मर्ज गर्ने मापदण्ड सटीक होइन, तर मानहरूको अनुमानित संयोग हो। समयको साथ फिल्डमा (उदाहरणका लागि, तपाइँ रेकर्डहरू मर्ज गर्न सक्नुहुन्छ, समय जुन 1 मिनेट भन्दा बढी फरक हुँदैन)।
• डाटाबेस मेटाडेटाको अल्छी लोडिङ लागू गरियो, जसले DBMS को प्रक्षेपणलाई दशौं पटकमा गति दिन सम्भव बनायो।
• पाइथनमा अनुकूलन प्रकार्यहरू जडान गर्न समर्थन थपियो।
• Apache Arrow को प्रयोग गरेर डाटा ट्रान्सफर गर्नको लागि ADBC ​​(Arrow Database Connectivity) API को लागि समर्थन थपियो।
• स्विफ्ट कोडसँग एकीकरणको लागि बाइन्डिङ लागू गरिएको छ।
• डिभिजन अपरेटर ("/") को व्यवहारलाई पूर्वनिर्धारित रूपमा पूर्णांक कार्यहरूको सट्टा फ्लोटिंग बिन्दु गणनाहरू गर्न परिवर्तन गरियो। पूर्णांक विभाजनको लागि नयाँ अपरेटर "//" प्रस्तावित छ। पुरानो व्यवहार "SET integer_division=true;" सेट गरेर फर्काउन सकिन्छ।
• क्रमबद्ध गर्दा शून्य रेकर्डहरू खातामा लिने विधि "NULLS FIRST" बाट "NULLS LAST" मा परिवर्तन गरिएको छ, अर्थात्। NULL मानहरू अब सूचीको सुरुको सट्टा अन्त्यमा छापिनेछ। पुरानो व्यवहार "SET default_null_order='nulls_first';" सेट गरेर फर्काउन सकिन्छ।

थप रूपमा, हामी फेसबुक द्वारा विकसित CG/SQL परियोजनालाई नोट गर्न सक्छौं, जसले SQLite सँग भण्डारण प्रक्रियाहरू प्रयोग गर्न कोड जनरेटर प्रदान गर्दछ। CG/SQL ले तपाईंलाई T-SQL (Transact-SQL) को विशेष बोलीमा भण्डारण प्रक्रियाहरू लेख्न अनुमति दिन्छ, जसले मानक C पुस्तकालयको कार्यहरू कल गर्न र SQLite मा डेटा पहुँच गर्न अनुमति दिन्छ। उत्पन्न भण्डारण प्रक्रियाहरू C कोडमा कम्पाइल गरिएका छन् जसले निर्दिष्ट कार्यहरू गर्न र जटिल प्रश्नहरू प्रशोधन गर्न SQLite C API प्रयोग गर्दछ। कम्पाइल गरिएको भण्डारण प्रक्रियाहरू C, Java, र Objective-C कार्यक्रमहरूमा जडान गर्न सकिन्छ। परियोजना कोड C मा लेखिएको छ र MIT लाइसेन्स अन्तर्गत वितरण गरिएको छ।

स्रोत: opennet.ru