ĂshtĂ« publikuar njĂ« version i sistemit tĂ« pĂ«rkthimit automatik OpenNMT-tf 2.30.0 (PĂ«rkthimi Automatik Neural), i cili pĂ«rdor metoda tĂ« mĂ«simit tĂ« makinerive. Kodi i moduleve tĂ« zhvilluara nga projekti OpenNMT-tf Ă«shtĂ« shkruar nĂ« gjuhĂ«n Python, pĂ«rdor bibliotekĂ«n TensorFlow dhe shpĂ«rndahet nĂ«n licencĂ«n MIT.
NjĂ« variant OpenNMT nĂ« bazĂ« tĂ« bibliotekĂ«s PyTorch Ă«shtĂ« gjithashtu duke u zhvilluar paralelisht, i cili ndryshon nĂ« nivelin e mundĂ«sive tĂ« mbĂ«shtetura. PĂ«r mĂ« tepĂ«r, OpenNMT nĂ« bazĂ« tĂ« PyTorch paraqitet si mĂ« i lehtĂ« pĂ«r t'u pĂ«rdorur dhe multimodal, ndĂ«rsa varianti nĂ« bazĂ« tĂ« TensorFlow shquhet si modular, i stabilizuar dhe qĂ« lejon shfrytĂ«zimin e mundĂ«sive tĂ« GPU pĂ«r tĂ« pĂ«rshpejtuar procesin e mĂ«simit tĂ« rrjetit neural. PĂ«r tĂ« thjeshtuar shpĂ«rndarjen e produktit, projekti gjithashtu zhvillon njĂ« variant vetĂ«-mjaftues tĂ« pĂ«rkthyesit nĂ« gjuhĂ«n C++ â CTranslate2, i cili pĂ«rdor modele tĂ« trajuara paraprakisht pa varĂ«si tĂ« tjera.
Modelet janĂ« pĂ«rgatitur pĂ«r gjuhĂ«t angleze, gjermane dhe katalanase; pĂ«r gjuhĂ«t e tjera Ă«shtĂ« e mundur tĂ« krijoni vetĂ« njĂ« model mbi bazĂ«n e njĂ« grupi tĂ« dhĂ«nash nga projekti OPUS (pĂ«r tĂ« trajnuar sistemin, i dhĂ«nĂ« dy skedarĂ« â njĂ« me fjalitĂ« nĂ« gjuhĂ«n origjinale dhe njĂ« tjetĂ«r me pĂ«rkthimin cilĂ«sor tĂ« kĂ«tyre fjalive nĂ« gjuhĂ«n e synuar).
Projekti zhvillohet me pjesëmarrjen e kompanisë SYSTRAN, e specializuar në krijimin e mjeteve të përkthimit automatik, dhe një grupi kërkuesish nga Harvard, që zhvillon modele të gjuhës njerëzore për sistemet e mësimit të makinerive. Ndërfaqja e përdoruesit është sa më e thjeshtë dhe kërkon vetëm përcaktimin e skedarit hyrës me tekstin dhe skedarin për ruajtjen e rezultatit të përkthimit. Sistemi i zgjerimeve ofron mundësinë për të implementuar funksionalitete të tjera mbi bazën e OpenNMT, për shembull, autoreferim, klasifikimin e teksteve dhe gjenerimin e titrave.
NĂ« versionin e ri:
- ĂshtĂ« shtuar mbĂ«shtetje pĂ«r bibliotekĂ«n TensorFlow 2.11, por optimizuesit e rinj Keras pĂ«r momentin nuk mbĂ«shteten (duhet pĂ«rdorur moda tf.keras.optimizers.legacy).
- ĂshtĂ« shtuar mbĂ«shtetje pĂ«r degĂ«n e re tĂ« motorit CTranslate2 3.x, e cila Ă«shtĂ« e destinuar pĂ«r ekzekutimin efikas tĂ« modeleve me arkitekturĂ« "transformator".
- ĂshtĂ« shtuar parametri i trajnimit tĂ« modeleve pad_to_bucket_boundary pĂ«r tĂ« pĂ«rfshirĂ« mbushjen shtesĂ«, e cila rregullon madhĂ«sinĂ« e bllokut nĂ« shumĂ« tĂ« values length_bucket_width.
- ĂshtĂ« integruar mbĂ«shtetje pĂ«r metrikat chrf dhe chrf++ nga projekti SacreBLEU, qĂ« krahasojnĂ« pĂ«rkthimin automatike me pĂ«rkthimin njerĂ«zor standard.
- ĂshtĂ« hequr atributi model ctranslate2_spec, i cili nuk pĂ«rdoret mĂ« nĂ« CTranslate2.
Burimi: opennet.ru
