OpenNMT 2.28.0 기계번역 시스템 출시

머신 러닝 기법을 사용하는 OpenNMT 0.28.0(Open Neural Machine Translation) 기계 번역 시스템이 출시되었습니다. 이 프로젝트는 신경망을 구축하기 위해 TensorFlow 딥 머신 러닝 라이브러리의 기능을 활용합니다. OpenNMT 프로젝트에서 개발한 모듈의 코드는 Python으로 작성되었으며 MIT 라이선스에 따라 배포됩니다. 영어, 독일어, 카탈루냐어 모델은 기성 모델이 준비되어 있으며, 다른 언어의 경우 OPUS 프로젝트의 데이터 세트를 기반으로 모델을 직접 생성할 수 있습니다. (학습을 위해 두 개의 파일이 시스템에 전송됩니다. 하나는 원본 언어 문장이고, 다른 하나는 원본 언어 문장을 대상 언어로 고품질로 번역한 파일입니다.)

이 프로젝트는 기계 번역 도구 개발 전문 기업인 SYSTRAN과 기계 학습 시스템을 위한 인간 언어 모델을 개발하는 하버드 연구진의 참여로 개발되고 있습니다. 사용자 인터페이스는 최대한 단순하며, 텍스트가 포함된 입력 파일과 번역 결과 저장 파일만 필요합니다. 이 확장 시스템을 통해 자동 참조, 텍스트 분류, 자막 생성과 같은 OpenNMT 기반 추가 기능을 구현할 수 있습니다.

TensorFlow를 사용하면 GPU 기능을 사용하여 신경망 학습 프로세스를 가속화할 수 있습니다. 제품 배포를 단순화하기 위해 이 프로젝트에서는 C++ 언어로 된 독립형 번역기 버전인 CTranslate2도 개발하고 있습니다. 이 버전은 추가 종속성에 구애받지 않고 사전 학습된 모델을 사용합니다.

새 버전에서는 initial_learning_rate 매개변수가 추가되고, Transformer 모델 생성기 구성을 위한 여러 새로운 인수(mha_bias 및 output_layer_bias)가 구현되었습니다. 그 외에는 버그 수정이 이루어졌습니다.

출처 : opennet.ru