I-TiDB 3.0 isasaze ukukhutshwa kwe-DBMS

Iyafumaneka kusasazwa ukukhutshwa kweDBMS I-TiDB 3.0iphuhliswe phantsi kweempembelelo zetekhnoloji zikaGoogle Spanner и F1. I-TiDB yeyodidi lwe-HTAP exutyiweyo (iHybrid Transactional/Analytical Processing) iinkqubo ezikwaziyo ukubonelela ngeentengiselwano zexesha langempela (OLTP) kunye nemibuzo yohlalutyo. Iprojekthi ibhalwe kwiGo kunye isasazwa ngu ilayisenisi phantsi kweApache 2.0.

Iimpawu zeTiDB:

• Inkxaso ye-SQL kunye nokubonelela nge-interface yomxhasi ehambelana ne-MySQL protocol, eyenza kube lula ukulungelelanisa izicelo ezikhoyo ezibhaliweyo kwi-MySQL kwi-TiDB, kwaye ikuvumela ukuba usebenzise amathala eencwadi abaxhasi abaqhelekileyo. Ukongeza kwiprotocol ye-MySQL, ungasebenzisa i-API esekwe kwi-JSON kunye nekhonkco ye-Spark ukufikelela kwi-DBMS.
• Kweempawu zeSQL, izalathiso, imisebenzi edityanisiweyo, IQELA NGOKU, UKUYALELA NGOKU, UKUZENZA OKUHLUKENEYO, ukudibanisa (UKU JOYINA NGENXELE / ELUNGELO JOIN / UMNQAPHISO JOIN), iimboniselo, imisebenzi yewindow kunye ne-subqueries zixhaswa. Amathuba anikezelweyo anele ukucwangcisa umsebenzi kunye ne-TiDB yezicelo zewebhu ezifana nePhpMyAdmin, IiGogs kunye neWordPress;
• Ukulinganisa kunye nokuqina: Ugcino kunye namandla okusebenza anokunyuswa ngokulula ngokongeza iindawo ezintsha. Idatha isasazwa kuzo zonke iindawo kunye nokuphindaphinda ukuvumela imisebenzi ukuba iqhubeke ukuba iindawo zomntu ngamnye ziyasilela. Iintsilelo zisingathwa ngokuzenzekelayo.
• Inkqubo iqinisekisa ukuhambelana kwaye ibukeka njenge-DBMS enye enkulu kwi-software yomxhasi, nangona ukuba, eqinisweni, idatha evela kwiinode ezininzi ibandakanyeka ukugqiba ukuthengiselana.
• Для физического хранения данных на узлах могут применяться разные бэкенды, например, локальные движки хранения GoLevelDB и BoltDB или собственный движок распределённого хранилища I-TiKV.
• Ikhono lokutshintsha i-asynchronously isikimu sokugcina, ukuvumela ukuba ungeze iikholamu kunye nezalathisi kwi-fly ngaphandle kokuyeka ukuqhutyelwa kwemisebenzi eqhubekayo.

Siseko ezintsha:

• Проведена работа по увеличению производительности. В тесте Sysbench выпуск 3.0 опережает ветку 2.1 в 1.5 раза при выполнении операций select и update, а в тесте TPC-C в 4.5 раза. Оптимизации затронули различные виды запросов, включая подзапросы «IN», «DO» и «NOT EXISTS», операции слияния таблиц (JOIN), использование индексов и многое другое;
  

• Добавлен новый движок хранения TiFlash, позволяющий добиться более высокой производительности при решении аналитических задач (OLAP), благодаря хранению в привязке к столбцам. TiFlash дополняет собой ранее предлагаемое хранилище TiKV, хранящее данные в разрезе строк в формате ключ/значение и более опримальное для задач обработки транзакций (OLTP). TiFlash работает бок о бок с TiKV и данные продолжают как и раньше реплицироваться в TiKV с использоанием протокола Raft для определении консенсуса, но для каждой группы реплик Raft создаётся дополнительная реплика, которая используется в TiFlash. Подобный поход позволяет добиться лучшего разделения ресурсов между задачами OLTP и OLAP, а также делает данные транзакций мгновенно доступными для аналитических запросов;
  

• Реализован распределённый сборщик мусора, позволяющий существенно повысить скорость сборки мусора в крупных кластерах и повысить стабильность работы;
• Добавлена экспериментальная реализация системы разграничения доступа на основе ролей (RBAC). Также обеспечена возможность задания прав доступа для операций ANALYZE, USE, SET GLOBAL и SHOW PROCESSLIST;
• Добавлена возможность использования выражений SQL для выблрки из лога медленных запросов;
• Реализован механизм быстрого восстановления удалённых таблиц, позволяющий восстановить случайно удалённые данные;
• Унифицирован формат записываемых логов;
• Добавлена поддержка пессимистического режима блокировки, который делает обработку транзакций более близкой к MySQL;
• Добавлена поддержка оконных функций (window-функции или аналитические функции), совместимых с MySQL 8.0. Оконные функции позволяют для каждой строки запроса выполнить вычисления, используя другие строки. В отличие от агрегатных функций, которые свёртывают сгруппированный набор строк в одну строку, оконные функции производят агрегирование на основе содержимого «окна», включающего одну или более строк из результирующего набора. Среди реализованных оконных функций:
  NTILE, LEAD, LAG, PERCENT_RANK, NTH_VALUE, CUME_DIST, FIRST_VALUE , LAST_VALUE, RANK, DENSE_RANK и ROW_NUMBER;

• Добавлена экспериментальная поддержка представлений (VIEW);
• Улучшена система секционирования (партицирования), добавлена возможность распределения данным по секциям на основании диапазона значений или хэшей;
• Добавлен фреймворк для разработки плагинов, например, уже подготовлены плагины для использования белого списка IP или ведения лога аудита;
• Обеспечена экспериментальная поддержка функции «EXPLAIN ANALYZE» для построения плана выполнения SQL-запроса (SQL Plan Management);
• Добавлена команда next_row_id для получения идентификатора следующей строки;
• Добавлены новые встроенные функции JSON_QUOTE, JSON_ARRAY_APPEND, JSON_MERGE_PRESERVE, BENCHMARK ,COALESCE и NAME_CONST.

umthombo: opennet.ru