Lexikaalanalüsaatorite generaatori re2c 1.2 väljaanne

On toimunud väljalase re2c, vaba lexika analüsaatorite generaator C ja C++ keeltele. Tuletame meelde, et re2c kirjutati 1993. aastal Peter Bambulis'i poolt kui eksperimentaalne generaator väga kiiretele lexika analüsaatoritele, mis erineb teistest generaatoritest genereeritud koodi kiirusest ja ebatavalisest paindlikust kasutajaliidesest, mis võimaldab analüsaatorite hõlpsat ja tõhusat integreerimist olemasolevasse koodibaasi. Sellest ajast peale on projekt arenenud kogukonna toel ja jätkab katsetamise ja uurimise platvormina formaalsete grammatikate ja lõplike automaatide valdkonnas.

Väljaande ettevalmistamine võttis peaaegu aasta. Enamik ajast, nagu ikka, kulus teoreetilise aluse väljatöötamisele ja artikli kirjutamisele
artikkel „Efficient POSIX Submatch Extraction on NFA«.
Artiklis kirjeldatud algoritmid on rakendatud katsetusraamatukogus libre2c
(raamatukogu ja jõudluse testimine on vaikimisi välja lülitatud ja aktiveeritakse configure valiku „—enable-libs” kaudu). Teek ei ole mõeldud konkurendiks olemasolevatele projektidele, nagu RE2, vaid kui teadusuuringute platvorm uute arendamiseks.
algoritmid (mida saab hiljem kasutada re2c-s või teistes projektides). See on ka mugav testimise, sooritusvõime mõõtmise ja muude keeltele sidumiste loomise seisukohalt.

Re2c 1.2 versiooni peamised uuendused:

• Lisatud on uus lihtsustatud viis sisendi lõpu (EOF reegel) kontrollimiseks. Selleks on lisatud konfiguratsioon 're2c:eof',
  mis võimaldab valida lõpp-sümboli,
  ja eriline reegel '$', mis aktiveerub, kui lexer
  on edukalt jõudnud sissekande lõppu.
  Ajalooliselt pakub re2c mitmeid viise sissekande lõpu kontrollimiseks,
  mille efektiivsus ja lihtsus varieerub.
  rakendused. Uus meetod on loodud koodi kirjutamise lihtsustamiseks, samal ajal
  jäädes efektiivseks ja laialdaselt kasutatavaks. Vanad meetodid
  jätkuvalt toimivad ja võivad teatud juhtudel olla eelistatud.
• Lisatud on võime lisada väliseid faile direktiivi abil
  ‘/*!include:re2c 'file.re' */’, kus 'file.re' on kaasatud faili nimi. Re2c otsib faile kaasava faili kataloogist,
  ning ka ' -I' opsiooniga määratud teede loendist.
  Lisatud failid võivad sisaldada teisi faile.
  Re2c pakub 'standardsed' faile kataloogis 'include/',
  projektis — eeldatakse, et seal kogutakse kasulikke määratlusi
  regulaarkatkedest, midagi sarnast standardraamatukogule.
  Praegu on nõudluse tõttu lisatud üks fail Unicode'i kategooriate määratlemiseks.
• Lisatud on võimalus genereerida päisefailid juhusliku
  sisuga, mis on saadud valikute ' -t —type-header' (või vastavate
  konfiguratsioonide) ja uute direktiivide '/*!header:re2c:on*/' ja
  '/*!header:re2c:off*/' abil. See võib olla kasulik olukordades,
  kui re2c peab genereerima mängude, struktuuride ja makrode määratlusi,
  mida kasutatakse teistes tõlkeüksustes.
• Re2c mõistab nüüd UTF8-kripte ja sümbolite klasse regulaarkatkestetes.
  Vaikimisi parsib re2c väljendeid nagu '∀x ∃y' kui
  järjestikuseid 1-bitiseid ASCII sümboleid 'e2 88 80 78 20 e2 88 83 79'
  (heksakoodid), ja kasutajad peavad manuaalselt Unicode sümboleid escapedama:
  '\\u2200x \\u2203y'. See on paljude jaoks väga ebamugav ja ootamatu.
  Kasutajate sõnul (mida tõestavad pidevad bug-report'id). Seetõttu
  Re2c pakub valikut '—input-encoding {ascii | utf8}',
  mis võimaldab muuta käitumist ja parseerida '∀x ∃y' kui
  '2200 78 20 2203 79'.
• Re2c võimaldab nüüd kasutada tavalisi re2c-blokke režiimis „-r —reuse”.
  See on mugav, kui sisendfail sisaldab palju plokke, ja ainult osa neist
  vajab taaskasutamist.
• Saab määrata hoiatuste ja veateadete formaadi
  uue valiku „—location-format {gnu | msvc}” abil. GNU formaat kuvatakse
  nagu „failinimi:real:veerg:”, MSVC formaat aga nagu „failinimi(reala, veerg)”.
  See funktsioon võib olla kasulik IDE kasutajatele.
  Samuti on lisatud valik „—verbose”, mis kuvab lühikese võidukäigu teate eduka tulemuse korral.
• Koos on viidud kokku sobivusetapp flexiga — parandatud on mõned analüüsi vead ja
  vale operaatorite prioriteet harvadel juhtudel.
  Ajalooliselt võimaldab valik „-F —flex-support” kirjutada koodi
  kombineeritult flex- ja re2c-stiilis, mis teeb süntaktilise analüüsi veidi raskemaks.
  Flexi ühilduvusrežiimi kasutatakse uues koodis harva,
  kuid re2c jätkab selle toetamist tagurpidiseks ühilduvuseks.
• Sümboolsete klasside lahutamise operaator „/” kehtib nüüd
  enne kodeerimise lahti harutamist, mis võimaldab seda kasutada rohkemates olukordades,
  kui kasutatakse muutuvapikkusega sümbolikodeeringut (näiteks UTF8).
• Väljundfail luuakse nüüd aatomiliselt: re2c loob esmalt ajutise faili
  ja kirjutab sinna tulemuse, ning seejärel nimetab ajutise faili väljundfailiks
  ühe toiminguga.
• Dokumentatsiooni on täiendatud ja ümber kirjutatud; eelkõige on lisatud uusi
  peatükkide kohta http://re2c.org/manual/manual.html#buffer-refilling puhvri täitmine
  ja sisendi lõpu kontrollimise meetodite kohta.
  Uus dokumentatsioon on kogutud
  kõikehõlmava ühe lehe juhendi
  näidetega (samad algallikad kuvatakse nii manpage'is kui ka veebidokumentatsioonis).
  On tehtud nõrku katseid parandada veebisaidi loetavust telefonides.
• Arendajate vaatenurgast on re2c saanud täiustatud testimise süsteemi
  Debug-kood on nüüd release-ehitustes välja lülitatud ja
  saab lubada configure-valikuga „—enable-debug”.

Allikas: opennet.ru