Fa'asalalauina DBMS TiDB 4.0

Avanoa fa'asa'olotoina o se DBMS fa'asoa TiDB 4.0, atiina ae i lalo o le faatosinaga a Google tekinolosi Totolo и F1. TiDB o lo'o iai ile vaega ole hybrid HTAP (Hybrid Transactional/Analytical Processing), e mafai uma ona tu'uina atu fefa'ataua'iga i taimi moni (OLTP) ma fa'agasolo su'esu'ega au'ili'ili. Ua tusia le poloketi i le gagana Go ma tufatufaina e laiseneina i lalo ole Apache 2.0.

Vaega o TiDB:

• Lagolago SQL ma le tuʻuina atu o se tagata faʻaoga fesoʻotaʻiga e fetaui ma le MySQL protocol, lea e faʻafaigofie ai le fetuunaiga o tusi talosaga o loʻo i ai na tusia mo MySQL i le TiDB, ma faʻatagaina ai foi le faʻaogaina o faletusi masani a le au faipisinisi. I le faaopoopo atu i le MySQL protocol, e mafai ona e faʻaogaina se API faʻavae JSON ma se fesoʻotaʻiga mo Spark e maua ai le DBMS.
• O lo'o fa'aalia e SQL fa'asino igoa lagolago, galuega fa'aopoopo, GROUP BY, ORDER BY, DISTINCT expressions, merges (LEFT JOIN / RIGHT JOIN / CROSS JOIN), va'aiga, galuega fa'amalama ma su'esu'ega. O mea e mafai ona tuʻuina atu e lava lea e faʻatulaga ai galuega ma TiDB mo ia upega tafaʻilagi e pei ole PhpMyAdmin, Koka ma le WordPress;
• Fa'asa'o fa'asaga ma fa'apalepale fa'aletonu: tele le teuina ma le mana fa'agaioiga e mafai ona fa'ateleina i le na'o le fa'afeso'ota'i pona fou. O fa'amaumauga o lo'o fa'asalalauina i nodes ma le toe fa'aogaina, fa'ataga le fa'agaioiga e fa'aauau pe a fa'aletonu nodes ta'itasi. E otometi ona taulimaina faaletonu.
• O le faiga e faʻamaonia le tumau ma mo le tagata faʻapipiʻi polokalama e foliga mai e tasi le DBMS tele, e ui lava i le mea moni, o faʻamatalaga mai le tele o nodes e tosina mai e faʻamaeʻa le fefaʻatauaiga.
• Для физического хранения данных на узлах могут применяться разные бэкенды, например, локальные движки хранения GoLevelDB и BoltDB или собственные движки распределённого хранилища TiKV и TiFlash. TiKV хранит данные в разрезе строк в формате ключ/значение и является более оптимальным для задач обработки транзакций (OLTP). TiFlash хранит данные в привязке к столбцам и позволяет добиться более высокой производительности при решении аналитических задач (OLAP).
• Le mafai e asynchronously suia le polokalame teuina, e mafai ai ona e faaopoopo koluma ma faasino igoa i luga o le lele e aunoa ma le taofia o le faagasologa o gaoioiga faifai pea.

I le faʻasalalauga fou:

• По умолчанию включён распределённый сборщик мусора Green GC, позволяющий существенно повысить скорость сборки мусора в крупных кластерах и повысить стабильность работы;
• Добавлена поддержка больших транзакций, размер которых ограничены практически размером физической памяти. Ограничение размера одной транзакции увеличено со 100 МБ до 10ГБ;
• Добавлена поддержка команд BACKUP и RESTORE для резервного копирования;
• Добавлена возможность установки блокировки на таблицы;
• Добавлен совместимый с MySQL механизм изоляции транзакций на уровне чтения (READ COMMITTED);
• В команду «ADMIN SHOW DDL JOBS» добавлена поддержка выражений LIKE и WHERE;
• Добавлен параметр oom-use-tmp-storage, позволяющий использовать временные файлы для кэширования промежуточных результатов в условиях нехватки оперативной памяти;
• Добавлено ключевое слово Random для присвоения атрибутам случайных значений;
• В команде LOAD DATA появилась возможность использования шестнадцатеричных и двоичных выражений;
• Добавлено 15 параметров для управления поведением оптимизатора;
• Добавлены средства для диагностики производительности SQL-запросов. Добавлен лог медленных запросов, доступный через системные таблицы SLOW_QUERY / CLUSTER_SLOW_QUERY;
• Добавлена поддержка функций для работы с последовательностями;
• Добавлена возможность динамического изменения параметров конфигурации, читаемых из PD (Placement Driver, сервер управления кластером). Добавлена возможность использования выражения «SET CONFIG» для изменения настроек узлов PD/TiKV.
• Добавлена настройка max-server-connections для ограничения максимального числа одновременных соединений к серверу (по умолчанию 4096);
• Увеличена производительность в ситуациях, когда запрошенные столбцы полностью покрываются индексами;
• Добавлена оптимизация запросов на основе слияния индексов;
• Повышена производительность операций с диапазонами значений;
• Снижена нагрузка на CPU за счёт кэширования результатов обращения к индексам и отсеивания дубликатов;
• Добавлена поддержка нового формата хранения строк, позволяющего увеличить производительность таблиц с большим числом столбцов;
• В функции GROUP_CONCAT появилась поддержка выражения «ORDER BY»;
• Добавлена возможность извлечения данных из лога TiFlash через SQL;
• В команде «RECOVER TABLE реализована поддержка восстановления обрезанных таблиц;
• Добавлена системная таблица DDLJobs для запроса деталей о выполнении работ DDL;
• Добавлена возможность применения команды SHOW CONFIG для показа настроек PD и TiKV;
• E aofia ai по умолчанию кэш сопроцессора;
• Число сопрограмм (goroutine) в фазе повторных попыток коммита теперь может контролироваться при помощи настройки committer-concurrency;
• Добавлена возможность отображения регионов раздела таблиц (table partition);
• В tidb-server добавлена возможность ограничения размера временного хранилища;
• Добавлена поддержка операций «insert into tbl_name partition(partition_name_list)» и «replace into tbl_name partition(partition_name_list)»;
• В используемом для секционирования (партицирования) хэше добавлена поддержка фильтрации по признаку «is null»;
• Для секционированных таблиц добавлена поддержка операций проверки, чистки и восстановления индексов.

puna: opennet.ru