Издание на системата за машинен превод OpenNMT 2.28.0

Публикувана е версия на системата за машинен превод OpenNMT 0.28.0 (Open Neural Machine Translation), използваща методи на машинно обучение. За изграждането на невронната мрежа проектът използва възможностите на библиотеката за дълбоко машинно обучение TensorFlow. Кодът на разработваните от проекта OpenNMT модули е написан на езика Python и се разпространява под лицензия MIT. Готовите модели са подготвени за английски, немски и каталански езици, а за останалите езици може самостоятелно да се формулира модел на основата на набор от данни от проекта OPUS (за обучението на системата се предоставят два файла — един с изречения на изходния език и втори с качествения превод на тези изречения на целевия език).

Проектът се развива с участието на компанията SYSTRAN, специализирана в създаването на средства за машинен превод, и група изследователи от Harvard, които разработват модели на човешкия език за системи за машинно обучение. Потребителският интерфейс е максимално опростен и изисква единствено указване на входния файл с текста и файла за запазване на резултата от превода. Системата за разширения предоставя възможност за реализиране на допълнителна функционалност на базата на OpenNMT, например, автоматично резюмиране, класификация на текстове и генериране на субтитри.

Използването на TensorFlow позволява активиране на възможности на GPU (за ускоряване на процеса на обучение на невронната мрежа). За опростяване на разпространението на продукта, проектът също развива самоиздържаща се версия на преводача на C++ — CTranslate2, който използва предварително обучени модели без обвързване с допълнителни зависимости.

В новата версия е добавен параметърът initial_learning_rate и са реализирани няколко нови аргумента (mha_bias и output_layer_bias) за настройка на генератора на модели Transformer. В останалото се отбелязват поправки на грешки.

Източник: opennet.ru