שחרור ה-DBMS המבוזר TiDB 3.0

זמין שחרור של DBMS מבוזר TiDB 3.0, שפותח בהשפעת הטכנולוגיות של גוגל מַפתֵחַ בְּרָגִים и F1. TiDB שייכת לקטגוריה של מערכות HTAP היברידיות (Hybrid Transactional/Analytical Processing), המסוגלות גם לספק עסקאות בזמן אמת (OLTP) וגם לעבד שאילתות אנליטיות. הפרויקט כתוב בשפת Go ו מופץ על ידי מורשה תחת Apache 2.0.

תכונות של TiDB:

• תמיכה ב-SQL ואספקת ממשק לקוח התואם לפרוטוקול MySQL, המפשט את ההתאמה של יישומים קיימים שנכתבו עבור MySQL ל-TiDB, וכן מאפשר שימוש בספריות לקוח נפוצות. בנוסף לפרוטוקול MySQL, אתה יכול להשתמש ב-API מבוסס JSON ובמחבר עבור Spark כדי לגשת ל-DBMS.
• תכונות SQL תומכות באינדקסים, פונקציות מצטברות, GROUP BY, ORDER BY, ביטויי DISTINCT, מיזוגים (LEFT JOIN / RIGHT JOIN / CROSS JOIN), תצוגות, פונקציות חלון ושאילתות משנה. היכולות המסופקות מספיקות כדי לארגן עבודה עם TiDB עבור יישומי אינטרנט כגון PhpMyAdmin, Gogs ו- WordPress;
• מדרגיות אופקית וסובלנות תקלות: ניתן להגדיל את גודל האחסון וכוח העיבוד על ידי חיבור צמתים חדשים. הנתונים מופצים על פני צמתים עם יתירות, מה שמאפשר את המשך הפעולה אם צמתים בודדים נכשלים. כשלים מטופלים באופן אוטומטי.
• המערכת מבטיחה עקביות ועבור תוכנת הלקוח היא נראית כמו DBMS אחד גדול, למרות העובדה שלמעשה, נתונים מצמתים רבים נמשכים להשלמת העסקה.
• כדי לאחסן נתונים פיזית בצמתים, ניתן להשתמש ב-backends שונים, לדוגמה, מנועי אחסון מקומיים GoLevelDB ו- BoltDB או מנוע אחסון מבוזר משלנו TiKV.
• היכולת לשנות באופן אסינכרוני את סכימת האחסון, מה שמאפשר לך להוסיף עמודות ואינדקסים תוך כדי בלי לעצור את העיבוד של הפעולות השוטפות.

העיקרי חידושים:

• בוצעה עבודה להגברת התפוקה. במבחן Sysbench, גרסה 3.0 מהירה פי 2.1 מהענף 1.5 בעת ביצוע פעולות בחירה ועדכון, ובמבחן TPC-C פי 4.5. אופטימיזציות השפיעו על סוגים שונים של שאילתות, כולל שאילתות משנה IN, DO ו- NOT EXISTS, פעולות מיזוג טבלאות (JOIN), שימוש באינדקסים ועוד הרבה יותר;
  

• נוסף מנוע אחסון TiFlash חדש המאפשר ביצועים גבוהים יותר בפתרון בעיות אנליטיות (OLAP) הודות לאחסון עמודים. TiFlash משלים את אחסון TiKV שהוצע בעבר, המאחסן נתונים לפי שורה בפורמט מפתח/ערך ואידיאלי יותר למשימות עיבוד עסקאות (OLTP). TiFlash עובד זה לצד זה עם TiKV והנתונים ממשיכים להיות משוכפלים ל-TiKV כמו בעבר תוך שימוש בפרוטוקול Raft כדי לקבוע קונצנזוס, אך עבור כל קבוצה של רפליקות Raft נוצר העתק נוסף המשמש ב-TiFlash. גישה זו מאפשרת שיתוף משאבים טוב יותר בין משימות OLTP ו-OLAP, וכן הופכת את נתוני העסקאות לזמינים באופן מיידי עבור שאילתות אנליטיות;
  

• הופעל אספן אשפה מבוזר, שיכול להגביר משמעותית את מהירות איסוף האשפה באשכולות גדולים ולשפר את היציבות;
• נוספה יישום ניסיוני של בקרת גישה מבוססת תפקידים (RBAC). אפשר גם להגדיר זכויות גישה לפעולות ANALYZE, USE, SET GLOBAL ו-SHOW PROCESSLIST;
• נוספה את היכולת להשתמש בביטויי SQL כדי לחלץ שאילתות איטיות מהיומן;
• יושם מנגנון לשחזור מהיר של טבלאות שנמחקו, המאפשר לך לשחזר נתונים שנמחקו בטעות;
• הפורמט של יומנים מוקלטים אוחד;
• נוספה תמיכה במצב נעילה פסימי, מה שהופך את עיבוד העסקאות לדומה יותר ל-MySQL;
• נוספה תמיכה בפונקציות חלון (פונקציות חלון או פונקציות אנליטיות) התואמות ל-MySQL 8.0. פונקציות חלון מאפשרות לך לבצע חישובים עבור כל שורת שאילתה באמצעות שורות אחרות. בניגוד לפונקציות מצטברות, שמכווצות קבוצה מקובצת של שורות לשורה אחת, פונקציות חלון מצטברות על סמך התוכן של "חלון", הכולל שורה אחת או יותר מקבוצת התוצאות. בין פונקציות החלונות המיושמות:
  NTILE, LEAD, LAG, PERCENT_RANK, NTH_VALUE, CUME_DIST, FIRST_VALUE, LAST_VALUE, RANK, DENSE_RANK ו-ROW_NUMBER;

• נוספה תמיכה ניסיונית לתצוגות (VIEW);
• מערכת המחיצות שופרה, נוספה היכולת להפיץ נתונים למקטעים על סמך מגוון ערכים או hashes;
• נוספה מסגרת לפיתוח תוספים, למשל, תוספים כבר הוכנו לשימוש ברשימת הלבנים של IP או שמירה על יומן ביקורת;
• ניתנה תמיכה ניסיונית עבור הפונקציה "EXPLAIN ANALYZE" לבניית תוכנית ביצוע עבור שאילתת SQL (ניהול תוכנית SQL);
• נוספה הפקודה next_row_id כדי לקבל את המזהה של השורה הבאה;
• נוספו פונקציות מובנות חדשות JSON_QUOTE, JSON_ARRAY_APPEND, JSON_MERGE_PRESERVE, BENCHMARK ,COALESCE ו-NAME_CONST.

מקור: OpenNet.ru