OpenNMT 2.28.0 기계번역 시스템 출시

기계학습 기법을 활용한 OpenNMT 0.28.0(Open Neural Machine Translation) 기계번역 시스템이 출시되었습니다. 신경망을 구축하기 위해 프로젝트에서는 TensorFlow 심층 머신러닝 라이브러리의 기능을 사용합니다. OpenNMT 프로젝트에서 개발된 모듈의 코드는 Python으로 작성되었으며 MIT 라이선스에 따라 배포됩니다. 기성 모델은 영어, 독일어 및 카탈로니아어용으로 준비되어 있으며, 기타 언어의 경우 OPUS 프로젝트의 데이터 세트를 기반으로 모델을 독립적으로 생성할 수 있습니다(교육을 위해 두 개의 파일이 시스템으로 전송됩니다. 하나는 소스 언어, 두 번째는 이러한 문장을 대상 언어로 고품질 번역한 것입니다.

이 프로젝트는 기계 번역 도구 제작 전문 기업인 SYSTRAN과 기계 학습 시스템을 위한 인간 언어 모델을 개발하는 하버드 연구원 그룹이 참여하여 개발되고 있습니다. 사용자 인터페이스는 최대한 단순화되었으며 텍스트가 포함된 입력 파일과 번역 결과를 저장할 파일만 지정하면 됩니다. 확장 시스템을 사용하면 OpenNMT를 기반으로 자동 요약, 텍스트 분류, 자막 생성 등의 추가 기능을 구현할 수 있습니다.

TensorFlow를 사용하면 GPU 기능을 사용할 수 있습니다(신경망 훈련 프로세스 속도를 높이기 위해). 제품 배포를 단순화하기 위해 프로젝트에서는 C++ - CTranslate2로 자급자족 가능한 번역기 버전도 개발 중입니다. , 추가 종속성을 참조하지 않고 사전 훈련된 모델을 사용합니다.

새 버전에서는initial_learning_rate 매개변수를 추가하고 몇 가지 새로운 인수(mha_bias 및output_layer_bias)를 구현하여 Transformer 모델 생성기를 구성합니다. 나머지는 버그 수정으로 표시됩니다.

출처 : opennet.ru