Seseteme ea phetolelo ea mochini ea OpenNMT-tf 2.30.0 (Open Neural Machine Translation), e sebelisang mekhoa ea ho ithuta ka mochini, e lokollotsoe. Khoutu ea li-module tse hlahisitsoeng ke morero oa OpenNMT-tf e ngotsoe ka Python, e sebelisa laebrari ea TensorFlow, 'me e ajoa tlas'a laesense ea MIT.
Ka ho ts'oana, ho ntse ho ntlafatsoa mofuta oa OpenNMT o ipapisitseng le laeborari ea PyTorch, e fapaneng ka boemo ba bokhoni bo tšehetsoeng. Ho phaella moo, OpenNMT e thehiloeng ho PyTorch e hlahisoa e le bonolo ho e sebelisa le ho sebelisa mekhoa e mengata, 'me phetolelo e thehiloeng ho TensorFlow e tsejoa e le modular, e tsitsitseng le e lumellang tšebeliso ea bokhoni ba GPU ho potlakisa ts'ebetso ea koetliso ea marang-rang a neural. Ho nolofatsa kabo ea sehlahisoa, morero ona o boetse o hlahisa phetolelo e ikemetseng ea mofetoleli ho C ++ - CTranslate2, e sebelisang mehlala e koetlisitsoeng pele e sa tlameletsoe ho tse ling tse itšetlehileng ka tsona.
Mehlala e lokiselitsoe Senyesemane, Sejeremane le Secatalan; bakeng sa lipuo tse ling, u ka ikemela ho theha mohlala o thehiloeng ho sete ea data ho tloha morerong oa OPUS (lifaele tse peli li fetisetsoa tsamaisong bakeng sa koetliso - e 'ngoe e nang le lipolelo ka puo ea mohloli,' me ea bobeli e na le phetolelo ea boleng bo phahameng ba lipolelo tsena ka puo e lebisitsoeng).
Morero o ntse o ntlafatsoa ka ho kenya letsoho ha SYSTRAN, k'hamphani e sebetsanang ka ho khetheha le ho theha lisebelisoa tsa ho fetolela ka mochini, le sehlopha sa bafuputsi ba Harvard ba nts'etsapele mehlala ea lipuo tsa batho bakeng sa litsamaiso tsa ho ithuta ka mochini. Sehokelo sa mosebelisi se bonolo ka hohle kamoo ho ka khonehang mme se hloka feela faele e kentsoeng ka mongolo le faele bakeng sa ho boloka sephetho sa phetolelo. Sistimi ea katoloso e etsa hore ho khonehe ho kenya tšebetsong ts'ebetso e eketsehileng e ipapisitseng le OpenNMT, joalo ka referense ea boits'oaro, ho hlopha mongolo, le tlhahiso ea lihlooho tse tlase.
Khatisong e ncha:
- Tšehetso bakeng sa laebrari ea TensorFlow 2.11 e kentsoe, empa lisebelisoa tse ncha tsa Keras ha li so tšehetsoe (e hloka ho sebelisa tf.keras.optimizers.legacy mode).
- Ts'ehetso e ekelitsoeng bakeng sa lekala le lecha la enjene ea CTranslate2 3.x, e etselitsoeng ts'ebetso e nepahetseng ea mehlala e nang le meaho ea "transformer".
- E kenyellelitsoe paramethara ea koetliso ea mohlala pad_to_bucket_boundary ho thusa padding e eketsehileng e hokahanyang boholo ba bakete ho li-multiples tsa length_bucket_width.
- Ts'ehetso e kopaneng ea chrf le chrf++ metrics ho tsoa ho projeke ea SacreBLEU, e bapisang phetolelo ea mochini le phetolelo ea motho.
- Moetso o tlositsoeng oa ctranslate2_spec, o seng o sa sebelisoe ho CTranslate2.
Source: opennet.ru
