ການປ່ອຍຕົວເຄື່ອງກໍາເນີດ re2c lexer 1.2

ໄດ້ຈັດຂຶ້ນ ປ່ອຍຕົວ re2c, ເປັນເຄື່ອງສ້າງການວິເຄາະ lexical ຟຣີສໍາລັບພາສາ C ແລະ C ++. ຈື່ໄວ້ວ່າ re2c ໄດ້ຖືກຂຽນໃນປີ 1993 ໂດຍ Peter Bambulis ເປັນຜູ້ຜະລິດທົດລອງຂອງການວິເຄາະ lexical ໄວຫຼາຍ, ແຕກຕ່າງຈາກເຄື່ອງກໍາເນີດອື່ນໆໃນຄວາມໄວຂອງລະຫັດທີ່ສ້າງຂຶ້ນແລະການໂຕ້ຕອບຜູ້ໃຊ້ທີ່ມີຄວາມຍືດຫຍຸ່ນຜິດປົກກະຕິທີ່ຊ່ວຍໃຫ້ນັກວິເຄາະປະສົມປະສານໄດ້ງ່າຍແລະມີປະສິດທິພາບເຂົ້າໄປໃນລະຫັດທີ່ມີຢູ່. ພື້ນຖານ. ນັບຕັ້ງແຕ່ນັ້ນມາ, ໂຄງການດັ່ງກ່າວໄດ້ຖືກພັດທະນາໂດຍຊຸມຊົນແລະສືບຕໍ່ເປັນເວທີສໍາລັບການທົດລອງແລະການຄົ້ນຄວ້າໃນພາກສະຫນາມຂອງໄວຍາກອນຢ່າງເປັນທາງການແລະເຄື່ອງຈັກຂອງລັດ finite.

ການກະກຽມສໍາລັບການປ່ອຍໄດ້ໃຊ້ເວລາເກືອບທັງຫມົດປີ. ເວລາສ່ວນໃຫຍ່, ຕາມເຄີຍ, ແມ່ນໃຊ້ໃນການພັດທະນາກອບທິດສະດີແລະການຂຽນ
ບົດຄວາມ "ການສະກັດເອົາການຈັບຄູ່ POSIX ທີ່ມີປະສິດທິພາບໃນ NFA"
ສູດການຄິດໄລ່ທີ່ອະທິບາຍໄວ້ໃນບົດຄວາມຖືກປະຕິບັດຢູ່ໃນຫ້ອງສະຫມຸດທົດລອງ libre2c
(ການສ້າງຫ້ອງສະໝຸດ ແລະການທົດສອບປະສິດທິພາບຖືກປິດໃຊ້ງານໂດຍຄ່າເລີ່ມຕົ້ນ ແລະຖືກເປີດໃຊ້ໂດຍຕົວເລືອກການຕັ້ງຄ່າ “—enable-libs”). ຫ້ອງສະຫມຸດບໍ່ໄດ້ມີຈຸດປະສົງເປັນຄູ່ແຂ່ງກັບໂຄງການທີ່ມີຢູ່ແລ້ວເຊັ່ນ RE2, ແຕ່ເປັນເວທີການຄົ້ນຄວ້າສໍາລັບການພັດທະນາໃຫມ່.
algorithms (ຊຶ່ງຫຼັງຈາກນັ້ນສາມາດຖືກນໍາໃຊ້ໃນ re2c ຫຼືໃນໂຄງການອື່ນໆ). ມັນຍັງສະດວກຈາກຈຸດຂອງການທົດສອບ, ການວັດແທກການປະຕິບັດແລະການສ້າງການຜູກມັດກັບພາສາອື່ນໆ.

ນະວັດຕະກໍາຫຼັກໃນຮຸ່ນ re2c 1.2:

• ເພີ່ມວິທີການທີ່ງ່າຍດາຍໃຫມ່ສໍາລັບການກວດສອບການສິ້ນສຸດຂອງຂໍ້ມູນປ້ອນເຂົ້າ ("ກົດລະບຽບ EOF"). ສໍາລັບການນີ້, ການຕັ້ງຄ່າ "re2c:eof" ໄດ້ຖືກເພີ່ມ,
  ອະນຸຍາດໃຫ້ທ່ານເລືອກຕົວອັກສອນ terminal,
  ແລະກົດລະບຽບພິເສດ "$", ເຊິ່ງຖືກກະຕຸ້ນຖ້າ lexer
  ມາຮອດຈຸດສິ້ນສຸດຂອງຂໍ້ມູນການປ້ອນຂໍ້ມູນສຳເລັດແລ້ວ.
  ໃນປະຫວັດສາດ, re2c ສະຫນອງທາງເລືອກຂອງວິທີການຢັ້ງຢືນຈໍານວນຫນຶ່ງສໍາລັບ
  ສິ້ນ​ສຸດ​ການ​ນໍາ​ໃຊ້​ທີ່​ແຕກ​ຕ່າງ​ກັນ​ໃນ​ການ​ຈໍາ​ກັດ​, ປະ​ສິດ​ທິ​ພາບ​ແລະ​ຄວາມ​ງ່າຍ​ດາຍ​
  ຄໍາຮ້ອງສະຫມັກ. ວິທີການໃຫມ່ໄດ້ຖືກອອກແບບເພື່ອງ່າຍການຂຽນລະຫັດ, ໃນຂະນະທີ່
  ໃນຂະນະທີ່ຍັງມີປະສິດທິພາບ ແລະສາມາດນຳໃຊ້ໄດ້ຢ່າງກວ້າງຂວາງ. ວິທີການເກົ່າ
  ຍັງເຮັດວຽກ ແລະອາດຈະຖືກໃຈໃນບາງກໍລະນີ.

• ເພີ່ມຄວາມສາມາດໃນການລວມໄຟລ໌ພາຍນອກໂດຍໃຊ້ຄໍາສັ່ງ
  "/*!include:re2c "file.re" */", ເຊິ່ງ "file.re" ແມ່ນຊື່ຂອງໄຟລ໌ທີ່ຈະຖືກລວມເຂົ້າ. Re2c ຊອກຫາໄຟລ໌ໃນແຟ້ມລວມທັງແຟ້ມເອກະສານ,
  ເຊັ່ນດຽວກັນກັບຢູ່ໃນບັນຊີລາຍຊື່ຂອງເສັ້ນທາງທີ່ລະບຸໄວ້ໂດຍໃຊ້ຕົວເລືອກ "-I".
  ໄຟລ໌ທີ່ລວມເຂົ້າອາດຈະປະກອບມີໄຟລ໌ອື່ນໆ.
  Re2c ສະໜອງໄຟລ໌ "ມາດຕະຖານ" ໃນໄດເລກະທໍລີ "include/".
  ໂຄງການ - ຄາດວ່າຄໍານິຍາມທີ່ເປັນປະໂຫຍດຈະສະສົມຢູ່ທີ່ນັ້ນ
  ການສະແດງອອກເປັນປົກກະຕິ, ບາງສິ່ງບາງຢ່າງເຊັ່ນ: ຫ້ອງສະຫມຸດມາດຕະຖານ.
  ມາຮອດປະຈຸ, ຕາມຄໍາຮ້ອງຂໍຂອງຜູ້ອອກແຮງງານ, ໄຟລ໌ຫນຶ່ງທີ່ມີຄໍານິຍາມຂອງປະເພດ Unicode ໄດ້ຖືກເພີ່ມ.

• ເພີ່ມຄວາມສາມາດໃນການສ້າງໄຟລ໌ header ດ້ວຍ arbitrary
  ເນື້ອຫາໂດຍໃຊ້ຕົວເລືອກ "-t --type-header" (ຫຼືເຫມາະສົມ
  ການຕັ້ງຄ່າ) ແລະຄໍາສັ່ງໃຫມ່ "/*!header:re2c:on*/" ແລະ
  "/*!header:re2c:off*/". ນີ້ອາດຈະເປັນປະໂຫຍດໃນກໍລະນີທີ່
  ເມື່ອ re2c ຕ້ອງການສ້າງຄໍານິຍາມຂອງຕົວແປ, ໂຄງສ້າງແລະມະຫາພາກ,
  ໃຊ້ໃນຫົວຫນ່ວຍການແປອື່ນໆ.

• ດຽວນີ້ Re2c ເຂົ້າໃຈຕົວໜັງສື UTF8 ແລະຫ້ອງຮຽນຕົວອັກສອນໃນການສະແດງອອກປົກກະຕິ.
  ໂດຍຄ່າເລີ່ມຕົ້ນ, re2c parses ການສະແດງອອກເຊັ່ນ "∀x ∃y" ເປັນ
  ລຳດັບຂອງຕົວອັກສອນ ASCII 1-ບິດ “e2 88 80 78 20 e2 88 83 79”
  (ລະຫັດ hex), ແລະຜູ້ໃຊ້ຕ້ອງຫນີຕົວອັກສອນ Unicode ດ້ວຍຕົນເອງ:
  "\\u2200x\\u2203y". ນີ້ແມ່ນຄວາມບໍ່ສະດວກຫຼາຍແລະບໍ່ຄາດຄິດສໍາລັບຫຼາຍໆຄົນ
  ຜູ້ໃຊ້ (ເປັນຫຼັກຖານໂດຍບົດລາຍງານ bug ຄົງທີ່). ດັ່ງນັ້ນໃນປັດຈຸບັນ
  re2c ໃຫ້ທາງເລືອກ "--input-encoding {ascii | utf8}",
  ເຊິ່ງອະນຸຍາດໃຫ້ທ່ານປ່ຽນພຶດຕິກຳ ແລະວິເຄາະ “∀x ∃y” ເປັນ
  "2200 78 20 2203 79."

• ດຽວນີ້ Re2c ອະນຸຍາດໃຫ້ໃຊ້ບລັອກ re2c ປົກກະຕິໃນໂຫມດ "-r --reuse".
  ນີ້ແມ່ນສະດວກຖ້າຫາກວ່າໄຟລ໌ປ້ອນຂໍ້ມູນປະກອບດ້ວຍຫຼາຍຕັນແລະພຽງແຕ່ບາງສ່ວນຂອງເຂົາເຈົ້າ
  ຈໍາເປັນຕ້ອງໄດ້ນໍາໃຊ້ຄືນໃຫມ່.

• ໃນປັດຈຸບັນທ່ານສາມາດກໍານົດຮູບແບບຂອງຄໍາເຕືອນແລະຂໍ້ຄວາມຄວາມຜິດພາດ
  ການນໍາໃຊ້ທາງເລືອກໃຫມ່ "--location-format {gnu | msvc}". ຮູບແບບ GNU ຖືກສະແດງ
  ເປັນ "filename:line:column:", ແລະຮູບແບບ MSVC ເປັນ "filename(line,column)".
  ຄຸນນະສົມບັດນີ້ອາດຈະເປັນປະໂຫຍດສໍາລັບ IDE lovers.
  ທາງເລືອກ "--verbose" ຍັງໄດ້ຖືກເພີ່ມ, ເຊິ່ງສະແດງຂໍ້ຄວາມໄຊຊະນະສັ້ນຖ້າປະສົບຜົນສໍາເລັດ.

• ຮູບແບບ "ຄວາມເຂົ້າກັນໄດ້" ກັບ flex ໄດ້ຖືກປັບປຸງ - ບາງຂໍ້ຜິດພາດຂອງການວິເຄາະໄດ້ຖືກແກ້ໄຂແລະ
  ອັນດັບຕົວປະຕິບັດການທີ່ບໍ່ຖືກຕ້ອງໃນກໍລະນີທີ່ຫາຍາກ.
  ໃນປະຫວັດສາດ, ທາງເລືອກ "-F --flex-suppor" ອະນຸຍາດໃຫ້ທ່ານຂຽນລະຫັດ
  ປະສົມໃນຮູບແບບ flex ແລະແບບ re2c, ເຊິ່ງເຮັດໃຫ້ການແຍກວິເຄາະມີຄວາມຫຍຸ້ງຍາກເລັກນ້ອຍ.
  ຮູບແບບຄວາມເຂົ້າກັນໄດ້ຂອງ Flex ບໍ່ຄ່ອຍຈະຖືກນໍາໃຊ້ໃນລະຫັດໃຫມ່,
  ແຕ່ re2c ຍັງສືບຕໍ່ສະຫນັບສະຫນູນມັນສໍາລັບການເຂົ້າກັນໄດ້ໃນດ້ານຫລັງ.

• ປະຈຸບັນນີ້ໃຊ້ຕົວປະຕິບັດການຫັກລົບຂອງຫ້ອງຮຽນຕົວອັກສອນ "/"
  ກ່ອນທີ່ຈະຂະຫຍາຍການເຂົ້າລະຫັດ, ເຊິ່ງອະນຸຍາດໃຫ້ມັນຖືກນໍາໃຊ້ໃນກໍລະນີຈໍານວນຫລາຍ,
  ຖ້າໃຊ້ການເຂົ້າລະຫັດຄວາມຍາວຂອງຕົວແປ (ຕົວຢ່າງ UTF8).

• ໄຟລ໌ຜົນຜະລິດໄດ້ຖືກສ້າງຂື້ນໃນປັດຈຸບັນ: re2c ສ້າງໄຟລ໌ຊົ່ວຄາວກ່ອນ
  ແລະຂຽນຜົນໄດ້ຮັບໃສ່ມັນ, ແລະຫຼັງຈາກນັ້ນປ່ຽນຊື່ໄຟລ໌ຊົ່ວຄາວໄປຫາຜົນໄດ້ຮັບ
  ການດໍາເນີນງານຫນຶ່ງ.

• ເອກະສານໄດ້ຖືກສໍາເລັດແລະຂຽນຄືນໃຫມ່; ໂດຍສະເພາະ, ໃຫມ່ໄດ້ຖືກເພີ່ມ
  ບົດກ່ຽວກັບ http://re2c.org/manual/manual.html#buffer-refilling заполнение буфера
  и ກ່ຽວກັບວິທີກວດສອບການສິ້ນສຸດຂອງຂໍ້ມູນປ້ອນຂໍ້ມູນ.
  ເອກະສານໃຫມ່ແມ່ນເກັບກໍາຢູ່ໃນແບບຟອມ
  ຄູ່ມືຫນຶ່ງຫນ້າທີ່ສົມບູນແບບ
  ກັບຕົວຢ່າງ (ແຫຼ່ງດຽວກັນແມ່ນສະແດງຢູ່ໃນ manpage ແລະໃນເອກະສານອອນໄລນ໌).
  ຄວາມພະຍາຍາມທີ່ບໍ່ດີໄດ້ຖືກເຮັດເພື່ອປັບປຸງການອ່ານຂອງເວັບໄຊທ໌ໃນໂທລະສັບ.

• ຈາກທັດສະນະຂອງນັກພັດທະນາ, re2c ໄດ້ມາລະບົບຍ່ອຍທີ່ສົມບູນກວ່າ
  ການດີບັກ ລະຫັດດີບັກຕອນນີ້ຖືກປິດການນຳໃຊ້ໃນລຸ້ນສ້າງ ແລະ
  ສາມາດເປີດໃຊ້ໄດ້ໂດຍໃຊ້ຕົວເລືອກການຕັ້ງຄ່າ "--enable-debug".

ແຫຼ່ງຂໍ້ມູນ: opennet.ru