TiDB 3.0 разпределена версия на СУБД

На разположение издание на разпределена СУБД TiDB 3.0разработен под влиянието на технологиите на Google гаечен ключ и F1. TiDB принадлежи към категорията хибридни HTAP (хибридна транзакционна/аналитична обработка) системи, способни както да предоставят транзакции в реално време (OLTP), така и да обработват аналитични заявки. Проектът е написан на Go and разпространява се от лицензиран под Apache 2.0.

Характеристики на TiDB:

• Поддръжка за SQL и предоставянето на клиентски интерфейс, който е съвместим с протокола MySQL, което улеснява адаптирането на съществуващи приложения, написани за MySQL, към TiDB, а също така ви позволява да използвате общи клиентски библиотеки. В допълнение към MySQL протокола, можете да използвате JSON-базирания API и конектора за Spark за достъп до СУБД.
• От характеристиките на SQL се поддържат индекси, агрегатни функции, GROUP BY, ORDER BY, DISTINCT изрази, сливания (LEFT JOIN / RIGHT JOIN / CROSS JOIN), изгледи, прозоречни функции и подзаявки. Предоставените възможности са достатъчни за организиране на работа с TiDB на такива уеб приложения като PhpMyAdmin, Gogs и WordPress;
• Мащабиране и устойчивост: Мощността за съхранение и обработка може да бъде увеличена просто чрез добавяне на нови възли. Данните се разпределят между възли с излишък, за да могат операциите да продължат, ако отделните възли се повредят. Неизправностите се обработват автоматично.
• Системата гарантира последователност и изглежда като една голяма СУБД за клиентския софтуер, въпреки факта, че данните от много възли всъщност се използват за завършване на транзакцията.
• За физическо съхраняване на данни на възли могат да се използват различни бекендове, например локални машини за съхранение GoLevelDB и BoltDB или нашата собствена машина за разпределено съхранение TiKV.
• Възможността за асинхронна промяна на схемата за съхранение, което ви позволява да добавяте колони и индекси в движение, без да спирате обработката на текущите операции.

Основната иновации:

• Извършена е работа за повишаване на производителността. В теста Sysbench версия 3.0 е 2.1 пъти по-бърза от клона 1.5 при извършване на операции за избор и актуализиране, а в теста TPC-C с 4.5 пъти. Оптимизациите са засегнали различни видове заявки, включително подзаявки IN, DO и NOT EXISTS, операции за сливане на таблици (JOIN), използване на индекси и много други;
  

• Добавено е ново TiFlash устройство за съхранение, което позволява по-висока производителност при решаване на аналитични проблеми (OLAP) благодарение на колонното съхранение. TiFlash допълва предлаганото по-рано TiKV хранилище, което съхранява данни по ред във формат ключ/стойност и е по-идеално за задачи за обработка на транзакции (OLTP). TiFlash работи рамо до рамо с TiKV и данните продължават да се репликират към TiKV както преди, използвайки протокола Raft за определяне на консенсус, но за всяка група реплики на Raft се създава допълнителна реплика, която се използва в TiFlash. Този подход позволява по-добро споделяне на ресурси между OLTP и OLAP задачи и също така прави данните за транзакциите незабавно достъпни за аналитични заявки;
  

• Въведен е разпределен колектор за боклук, който може значително да увеличи скоростта на събиране на боклука в големи клъстери и да подобри стабилността;
• Добавено е експериментално внедряване на Role-Based Access Control (RBAC). Също така е възможно да се зададат права за достъп за операциите ANALYZE, USE, SET GLOBAL и SHOW PROCESSLIST;
• Добавена е възможност за използване на SQL изрази за извличане на бавни заявки от дневника;
• Въведен е механизъм за бързо възстановяване на изтрити таблици, който ви позволява да възстановите случайно изтрити данни;
• Форматът на записаните дневници е унифициран;
• Добавена е поддръжка за песимистичен режим на заключване, което прави обработката на транзакции по-подобна на MySQL;
• Добавена е поддръжка за прозоречни функции (прозоречни функции или аналитични функции), съвместими с MySQL 8.0. Функциите на прозореца ви позволяват да извършвате изчисления за всеки ред на заявка, като използвате други редове. За разлика от агрегатните функции, които свиват групиран набор от редове в един ред, прозоречните функции агрегатират въз основа на съдържанието на „прозорец“, който включва един или повече редове от набора с резултати. Сред внедрените функции на прозореца:
  NTILE, LEAD, LAG, PERCENT_RANK, NTH_VALUE, CUME_DIST, FIRST_VALUE, LAST_VALUE, RANK, DENSE_RANK и ROW_NUMBER;

• Добавена е експериментална поддръжка за изгледи (VIEW);
• Системата за разделяне е подобрена, добавена е възможността за разпределяне на данни в секции въз основа на диапазон от стойности или хешове;
• Добавена е рамка за разработване на плъгини, например вече са подготвени плъгини за използване на IP бял списък или поддържане на журнал за проверка;
• Осигурена е експериментална поддръжка за функцията “EXPLAIN ANALYZE” за конструиране на план за изпълнение на SQL заявка (SQL Plan Management);
• Добавена е команда next_row_id за получаване на ID на следващия ред;
• Добавени са нови вградени функции JSON_QUOTE, JSON_ARRAY_APPEND, JSON_MERGE_PRESERVE, BENCHMARK, COALESCE и NAME_CONST.

Източник: opennet.ru