Facebook ਮਸ਼ੀਨ ਅਨੁਵਾਦ ਮਾਡਲ ਪ੍ਰਕਾਸ਼ਿਤ ਕਰਦਾ ਹੈ ਜੋ 200 ਭਾਸ਼ਾਵਾਂ ਦਾ ਸਮਰਥਨ ਕਰਦਾ ਹੈ

Facebook (ਰਸ਼ੀਅਨ ਫੈਡਰੇਸ਼ਨ ਵਿੱਚ ਪਾਬੰਦੀਸ਼ੁਦਾ) ਨੇ NLLB (No Language Left Behind) ਪ੍ਰੋਜੈਕਟ ਦੇ ਵਿਕਾਸ ਨੂੰ ਪ੍ਰਕਾਸ਼ਿਤ ਕੀਤਾ ਹੈ, ਜਿਸਦਾ ਉਦੇਸ਼ ਅੰਗਰੇਜ਼ੀ ਵਿੱਚ ਵਿਚਕਾਰਲੇ ਅਨੁਵਾਦ ਨੂੰ ਬਾਈਪਾਸ ਕਰਦੇ ਹੋਏ, ਇੱਕ ਭਾਸ਼ਾ ਤੋਂ ਦੂਜੀ ਭਾਸ਼ਾ ਵਿੱਚ ਟੈਕਸਟ ਦਾ ਸਿੱਧਾ ਅਨੁਵਾਦ ਕਰਨ ਲਈ ਇੱਕ ਯੂਨੀਵਰਸਲ ਮਸ਼ੀਨ ਲਰਨਿੰਗ ਮਾਡਲ ਬਣਾਉਣਾ ਹੈ। ਪ੍ਰਸਤਾਵਿਤ ਮਾਡਲ 200 ਤੋਂ ਵੱਧ ਭਾਸ਼ਾਵਾਂ ਨੂੰ ਕਵਰ ਕਰਦਾ ਹੈ, ਜਿਸ ਵਿੱਚ ਅਫ਼ਰੀਕੀ ਅਤੇ ਆਸਟ੍ਰੇਲੀਆਈ ਲੋਕਾਂ ਦੀਆਂ ਦੁਰਲੱਭ ਭਾਸ਼ਾਵਾਂ ਸ਼ਾਮਲ ਹਨ। ਪ੍ਰੋਜੈਕਟ ਦਾ ਅੰਤਮ ਟੀਚਾ ਕਿਸੇ ਵੀ ਲੋਕਾਂ ਲਈ ਸੰਚਾਰ ਲਈ ਇੱਕ ਸਾਧਨ ਪ੍ਰਦਾਨ ਕਰਨਾ ਹੈ, ਭਾਵੇਂ ਉਹ ਕੋਈ ਵੀ ਭਾਸ਼ਾ ਬੋਲਦੇ ਹੋਣ।

ਮਾਡਲ ਇੱਕ ਕਰੀਏਟਿਵ ਕਾਮਨਜ਼ BY-NC 4.0 ਲਾਇਸੰਸ ਦੇ ਅਧੀਨ ਲਾਇਸੰਸਸ਼ੁਦਾ ਹੈ, ਜੋ ਕਾਪੀ ਕਰਨ, ਮੁੜ ਵੰਡਣ, ਅਨੁਕੂਲਿਤ ਕਰਨ ਅਤੇ ਡੈਰੀਵੇਟਿਵ ਕੰਮਾਂ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ, ਬਸ਼ਰਤੇ ਕਿ ਤੁਸੀਂ ਵਿਸ਼ੇਸ਼ਤਾ ਦਿੰਦੇ ਹੋ, ਲਾਇਸੈਂਸ ਨੂੰ ਕਾਇਮ ਰੱਖਦੇ ਹੋ, ਅਤੇ ਇਸਨੂੰ ਸਿਰਫ਼ ਗੈਰ-ਵਪਾਰਕ ਉਦੇਸ਼ਾਂ ਲਈ ਵਰਤਦੇ ਹੋ। ਮਾਡਲਾਂ ਨਾਲ ਕੰਮ ਕਰਨ ਲਈ ਟੂਲ ਐਮਆਈਟੀ ਲਾਇਸੰਸ ਦੇ ਤਹਿਤ ਪ੍ਰਦਾਨ ਕੀਤੇ ਗਏ ਹਨ। NLLB ਮਾਡਲ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਵਿਕਾਸ ਨੂੰ ਉਤੇਜਿਤ ਕਰਨ ਲਈ, ਖੋਜਕਰਤਾਵਾਂ ਨੂੰ ਗ੍ਰਾਂਟ ਪ੍ਰਦਾਨ ਕਰਨ ਲਈ $200 ਹਜ਼ਾਰ ਦੇਣ ਦਾ ਫੈਸਲਾ ਕੀਤਾ ਗਿਆ ਸੀ।

ਪ੍ਰਸਤਾਵਿਤ ਮਾਡਲ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਪ੍ਰੋਜੈਕਟਾਂ ਦੀ ਸਿਰਜਣਾ ਨੂੰ ਸਰਲ ਬਣਾਉਣ ਲਈ, ਮਾਡਲਾਂ ਦੀ ਗੁਣਵੱਤਾ ਦੀ ਜਾਂਚ ਅਤੇ ਮੁਲਾਂਕਣ ਲਈ ਵਰਤੇ ਗਏ ਐਪਲੀਕੇਸ਼ਨਾਂ ਦਾ ਕੋਡ (FLORES-200, NLLB-MD, Toxicity-200), ਸਿਖਲਾਈ ਮਾਡਲਾਂ ਲਈ ਕੋਡ ਅਤੇ LASER3 ਲਾਇਬ੍ਰੇਰੀ ਦੇ ਆਧਾਰ 'ਤੇ ਏਨਕੋਡਰ ( ਭਾਸ਼ਾ-ਅਗਨੋਸਟਿਕ ਵਾਕ ਪ੍ਰਤੀਨਿਧਤਾ)। ਫਾਈਨਲ ਮਾਡਲ ਦੋ ਸੰਸਕਰਣਾਂ ਵਿੱਚ ਪੇਸ਼ ਕੀਤਾ ਜਾਂਦਾ ਹੈ - ਪੂਰਾ ਅਤੇ ਛੋਟਾ। ਛੋਟੇ ਸੰਸਕਰਣ ਲਈ ਘੱਟ ਸਰੋਤਾਂ ਦੀ ਲੋੜ ਹੈ ਅਤੇ ਇਹ ਖੋਜ ਪ੍ਰੋਜੈਕਟਾਂ ਵਿੱਚ ਜਾਂਚ ਅਤੇ ਵਰਤੋਂ ਲਈ ਢੁਕਵਾਂ ਹੈ।

ਮਸ਼ੀਨ ਲਰਨਿੰਗ ਪ੍ਰਣਾਲੀਆਂ 'ਤੇ ਅਧਾਰਤ ਹੋਰ ਅਨੁਵਾਦ ਪ੍ਰਣਾਲੀਆਂ ਦੇ ਉਲਟ, Facebook ਦਾ ਹੱਲ ਇਸ ਗੱਲ ਵਿੱਚ ਧਿਆਨ ਦੇਣ ਯੋਗ ਹੈ ਕਿ ਇਹ ਸਾਰੀਆਂ 200 ਭਾਸ਼ਾਵਾਂ ਲਈ ਇੱਕ ਆਮ ਮਾਡਲ ਪੇਸ਼ ਕਰਦਾ ਹੈ, ਸਾਰੀਆਂ ਭਾਸ਼ਾਵਾਂ ਨੂੰ ਕਵਰ ਕਰਦਾ ਹੈ ਅਤੇ ਹਰੇਕ ਭਾਸ਼ਾ ਲਈ ਵੱਖਰੇ ਮਾਡਲਾਂ ਦੀ ਵਰਤੋਂ ਦੀ ਲੋੜ ਨਹੀਂ ਹੁੰਦੀ ਹੈ। ਅੰਗ੍ਰੇਜ਼ੀ ਵਿੱਚ ਵਿਚਕਾਰਲੇ ਅਨੁਵਾਦ ਦੇ ਬਿਨਾਂ, ਸਰੋਤ ਭਾਸ਼ਾ ਤੋਂ ਟੀਚੇ ਦੀ ਭਾਸ਼ਾ ਵਿੱਚ ਅਨੁਵਾਦ ਕੀਤਾ ਜਾਂਦਾ ਹੈ। ਯੂਨੀਵਰਸਲ ਟ੍ਰਾਂਸਲੇਸ਼ਨ ਸਿਸਟਮ ਬਣਾਉਣ ਲਈ, ਇੱਕ LID ਮਾਡਲ (ਭਾਸ਼ਾ ਪਛਾਣ) ਵੀ ਪ੍ਰਸਤਾਵਿਤ ਕੀਤਾ ਗਿਆ ਹੈ, ਜੋ ਵਰਤੀ ਗਈ ਭਾਸ਼ਾ ਨੂੰ ਨਿਰਧਾਰਤ ਕਰਨਾ ਸੰਭਵ ਬਣਾਉਂਦਾ ਹੈ। ਉਹ. ਸਿਸਟਮ ਆਪਣੇ ਆਪ ਪਛਾਣ ਸਕਦਾ ਹੈ ਕਿ ਜਾਣਕਾਰੀ ਕਿਸ ਭਾਸ਼ਾ ਵਿੱਚ ਪ੍ਰਦਾਨ ਕੀਤੀ ਗਈ ਹੈ ਅਤੇ ਇਸਨੂੰ ਉਪਭੋਗਤਾ ਦੀ ਭਾਸ਼ਾ ਵਿੱਚ ਅਨੁਵਾਦ ਕਰ ਸਕਦਾ ਹੈ।

ਅਨੁਵਾਦ ਕਿਸੇ ਵੀ ਦਿਸ਼ਾ ਵਿੱਚ ਸਮਰਥਿਤ ਹੈ, 200 ਸਮਰਥਿਤ ਭਾਸ਼ਾਵਾਂ ਵਿੱਚੋਂ ਕਿਸੇ ਦੇ ਵਿਚਕਾਰ। ਕਿਸੇ ਵੀ ਭਾਸ਼ਾ ਵਿੱਚ ਅਨੁਵਾਦ ਦੀ ਗੁਣਵੱਤਾ ਦੀ ਪੁਸ਼ਟੀ ਕਰਨ ਲਈ, FLORES-200 ਸੰਦਰਭ ਟੈਸਟ ਸੈੱਟ ਤਿਆਰ ਕੀਤਾ ਗਿਆ ਸੀ, ਜਿਸ ਨੇ ਦਿਖਾਇਆ ਕਿ ਅਨੁਵਾਦ ਦੀ ਗੁਣਵੱਤਾ ਦੇ ਮਾਮਲੇ ਵਿੱਚ NLLB-200 ਮਾਡਲ ਪਹਿਲਾਂ ਪ੍ਰਸਤਾਵਿਤ ਮਸ਼ੀਨ ਸਿਖਲਾਈ-ਅਧਾਰਿਤ ਖੋਜ ਪ੍ਰਣਾਲੀਆਂ ਨਾਲੋਂ ਔਸਤਨ 44% ਉੱਚਾ ਹੈ। ਮਿਆਰੀ ਮਨੁੱਖੀ ਅਨੁਵਾਦ ਨਾਲ ਮਸ਼ੀਨ ਅਨੁਵਾਦ ਦੀ ਤੁਲਨਾ ਕਰਨ ਵਾਲੇ BLEU ਮੈਟ੍ਰਿਕਸ। ਦੁਰਲੱਭ ਅਫਰੀਕੀ ਭਾਸ਼ਾਵਾਂ ਅਤੇ ਭਾਰਤੀ ਉਪਭਾਸ਼ਾਵਾਂ ਲਈ, ਗੁਣਵੱਤਾ ਦੀ ਉੱਤਮਤਾ 70% ਤੱਕ ਪਹੁੰਚਦੀ ਹੈ। ਵਿਸ਼ੇਸ਼ ਤੌਰ 'ਤੇ ਤਿਆਰ ਕੀਤੀ ਡੈਮੋ ਸਾਈਟ 'ਤੇ ਅਨੁਵਾਦ ਦੀ ਗੁਣਵੱਤਾ ਦਾ ਦ੍ਰਿਸ਼ਟੀਗਤ ਮੁਲਾਂਕਣ ਕਰਨਾ ਸੰਭਵ ਹੈ।

ਸਰੋਤ: opennet.ru