Сервис «Яндекс Переводчик», интегрированный с нейросетью YandexGPT, стал лидером по качеству перевода текста с английского на русский язык по итогам международного бенчмарка DiBiMT. В этой категории он обошел таких конкурентов, как Google Translate и GPT-4, используемую в ChatGPT.
Кроме «Яндекс Переводчика», в пятерку лучших вошли языковая модель Gemma 2 от Google, GPT-4 и GPT-3.5-turbo от OpenAI, а также онлайн-переводчик DeepL. Google Translate, в свою очередь, занял седьмое место в рейтинге.
Это второй год подряд, когда «Яндекс Переводчик» занимает первое место в категории перевода с английского на русский. Однако в предыдущем году он также попал в топы по качеству перевода на китайский, немецкий, итальянский и испанский языки, тогда как в этом году компания не была представлена в этих категориях.
По словам Петра Ермакова, отвечающего за бренд машинного обучения в «Яндексе», быстро меняющийся рынок онлайн-перевода открыл новые возможности для многих компаний благодаря развитию искусственного интеллекта. Он отметил, что лидерство сервиса в данной области удалось сохранить благодаря интеграции YandexGPT.
Внедрение большой языковой модели, как сообщается, позволило повысить точность перевода в два раза. Это связано с тем, что новая модель обрабатывает весь текст целиком, что повышает точность перевода слов с несколькими значениями и улучшает согласованность предложений. Также YandexGPT лучше понимает стиль оригинального текста.
Бенчмарк DiBiMT измеряет процент ошибок в переводе, включая неправильную интерпретацию значений слов. В тестировании участвовали 22 системы перевода, которые использовали базу данных из нескольких тысяч предложений на английском языке с омонимами. Алгоритмы бенчмарка и профессиональные переводчики оценивали долю корректно переведенных слов для каждой модели.
Напомним, что рейтинг был опубликован ведущими мировыми центрами в области машинного обучения, такими как итальянские институты Sapienza и SSML Carlo Bo. «Яндекс Переводчик» с YandexGPT обошел такие высокие позиции, как GPT-4 и другие современные нейросети, что подчеркивает значительный прогресс в области онлайн-перевода.