re2c 4.0

На 19 ноември, вторник, беше представен релиз re2c – генератор на лексически анализатори (също така компилатор на регулярни изрази в код на целевия език за програмиране). re2c се специализира в генерирането на бързи и лесно вградими лексери. Той се отличава от по-известния аналог flex с гъвкави интерфейси, генериране на оптимизирани нетаблични лексери и поддръжка на захват (submatch extraction) на базата на детерминирани крайни автомати с тагове (TDFA). re2c се използва в проекти, където е важна скоростта на работа на лексера, например в Ninja и в PHP.

В релиз 4.0 беше напълно преработена подсистемата за генериране на код, което позволи добавянето на поддръжка на осем нови езика (D, Haskell, Java, JavaScript, OCaml, Python, V, Zig), в допълнение към вече поддържаните (C/C++, Go, Rust), както и общ механизъм за добавяне на нови езици чрез конфигурационни файлове. Генераторът на код отговаря за транслацията на вече построения и оптимизиран краен автомат в код, тоест неговата задача е да избере подходящи управляващи конструкции за целевия език, типове данни, обща модел на програмата и т.н. По-рано всичката тази логика беше част от изходния код на re2c, и за да я промените или добавите нов език, се налагаше да патчите изходния код и да ресградите re2c. Подобни патчи не се приемаха в основния репозиторий без реализиране на стандартен набор от примери и тестове, което допълнително усложняваше целия процес. Сега цялата тази логика е прехвърлена в синтактични файлове – текстови конфигурационни файлове, които могат да бъдат предоставени от потребителя (по подразбиране re2c използва стандартни). Изходният код на re2c е напълно свободен от детайли за конкретен език и разчита само на синтактичния файл. Потребителят може частично да преопредели съществуващ синтактичен файл или да напише нов от нулата. За всички официално поддържани езици има пълна документация с примери.

Между другото, самата идея за синтактични файлове възникна благодарение на един коментар на ЛОР, за което благодарим на the_coder.

В релиза бяха включени много други промени за опростяване на потребителския интерфейс, подобряване на работата с захващащи групи (capturing groups), а също така беше добавена онлайн среда за редактиране и компилация на примери: http://re2c.org/playground.

Източник: linux.org.ru