Яндекс Переводчик был признан лучшим в мире по качеству перевода с английского на русский. Отечественный сервис лучше других языковых моделей справился с переводом с английского на русский язык и стал в этой категории лучшим по итогам международного независимого бенчмарка DiBiMT. Рейтинг опубликовали итальянские институты Sapienza и SSML Carlo Bo – мировые центры изучения языка в машинном обучении.
Кроме того, Яндекс Переводчик занял третье место по качеству перевода с английского на китайский, немецкий, итальянский и испанский языки. Результаты теста показали, что сервис лучше других определяет значение конкретных английских слов в предложениях и допускает меньшее количество семантических ошибок.
В рамках исследования была собрана база из нескольких тысяч предложений на английском языке с омонимами. Сервисы и языковые модели переводили эти предложения, а алгоритмы и эксперты определяли корректность перевода. На основе полученных показателей был сформирован рейтинг.
Эксперты тестировали онлайн-переводчики, такие как Google Translate и DeepL, и открытые большие языковые модели: mBART-50, M2M100, OPUS.
Напомним, ранее Яндекс вошел в рейтинг Forbes и был признан самой дорогой российской интернет-компанией.
Источник: пресс-релиз Яндекса