{"id":106018,"date":"2022-12-13T09:36:49","date_gmt":"2022-12-13T07:36:49","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/vypusk-sistemy-mashinnogo-perevoda-opennmt-tf-2-30"},"modified":"2022-12-13T09:36:49","modified_gmt":"2022-12-13T07:36:49","slug":"vypusk-sistemy-mashinnogo-perevoda-opennmt-tf-2-30","status":"publish","type":"post","link":"https:\/\/prohoster.info\/nl\/blog\/news\/vypusk-sistemy-mashinnogo-perevoda-opennmt-tf-2-30","title":{"rendered":"Uitgave van het machinevertalingssysteem OpenNMT-tf 2.30","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
De release van het vertaalmachine-systeem OpenNMT-tf 2.30.0 (Open Neural Machine Translation) is gepubliceerd, dat gebruik maakt van methoden voor machine learning. De code van de modules die door het OpenNMT-tf-project worden ontwikkeld, is geschreven in de programmeertaal Python, maakt gebruik van de TensorFlow-bibliotheek en wordt verspreid onder de MIT-licentie. <\/p>\n
Tegelijkertijd ontwikkelt zich een versie van OpenNMT op basis van de PyTorch-bibliotheek, die verschilt in de ondersteunde mogelijkheden. Bovendien wordt OpenNMT op basis van PyTorch gepresenteerd als gebruiksvriendelijker en multimodaal, terwijl de versie op basis van TensorFlow wordt gekenmerkt als modulair, stabiel en in staat om GPU-mogelijkheden te benutten voor het versnellen van het leerproces van neurale netwerken. Om de distributie van het product te vergemakkelijken, ontwikkelt het project ook een zelfstandige versie van de vertaler in C++ \u2014 CTranslate2, die gebruikmaakt van vooraf getrainde modellen zonder extra afhankelijkheden. <\/p>\n
Modellen zijn voorbereid voor de Engelse, Duitse en Catalaanse talen; voor andere talen kan zelf een model worden gevormd op basis van de dataset van het OPUS-project (voor de training van het systeem worden twee bestanden aangereikt \u2014 \u00e9\u00e9n met zinnen in de brontaal en de tweede met een kwalitatieve vertaling van deze zinnen naar de doeltaal). <\/p>\n
Het project wordt ontwikkeld met deelname van het bedrijf SYSTRAN, dat gespecialiseerd is in het maken van middelen voor machinevertaling, en een groep onderzoekers van Harvard die modellen voor menselijke taal ontwikkelt voor systemen voor machine learning. De gebruikersinterface is maximaal vereenvoudigd en vereist alleen het opgeven van een invoerbestand met tekst en een bestand voor het opslaan van het vertaalresultaat. Het extensiesysteem biedt de mogelijkheid om extra functionaliteit op basis van OpenNMT te implementeren, zoals automatische samenvattingen, tekstclassificatie en het genereren van ondertitels. <\/p>\n
In de nieuwe versie: <\/p>\n
\n
Ondersteuning voor TensorFlow 2.11 is toegevoegd, maar nieuwe Keras-optimizers worden momenteel nog niet ondersteund (gebruik van de modus tf.keras.optimizers.legacy is vereist).\n
Ondersteuning is toegevoegd voor de nieuwe tak van de CTranslate2 3.x-engine, ontworpen voor de effici\u00ebnte uitvoering van modellen met een 'transformator'-architectuur.\n
Een trainingsparameter voor modellen, pad_to_bucket_boundary, is toegevoegd om aanvullend vullen in te schakelen, waardoor de blokgrootte overeenkomt met waarden die een veelvoud zijn van length_bucket_width.\n
Integratie van ondersteuning voor de meetwaarden chrf en chrf++ van het SacreBLEU-project, dat machinevertaling vergelijkt met referentie menselijke vertalingen.\n
Het attribuut model ctranslate2_spec is verwijderd, omdat het niet langer wordt gebruikt in CTranslate2. <\/ul>\n