В «Яндексе» создали новый метод оценки машинного перевода - IT Speaker, новости информационных технологий

В «Яндексе» создали новый метод оценки машинного перевода

Редакция

17:30 / 04 декабря 2025

Исследователи «Яндекса» создали новый метод оценки качества машинного перевода. Новинку можно применять для совершенствования моделей, которые уже переводят тексты довольно точно, но делают это не всегда естественно.

Фотография freepik

Например, в неформальном диалоге модель может перевести «sorry, my bad» как «приношу извинения, это моя вина» вместо «извини, ошиблась». Пользователь заметит, что нейросеть выбрала излишне официальный тон, но существующие системы оценки перевода такие ошибки игнорируют. Новый метод помогает обращать внимание ИИ на такие недочеты.

Система называется RATE (Refined Assessment for Translation Evaluation – улучшенная метрика для оценки перевода). Она, в отличие от других метрик, оценивает перевод по трем главным для пользователя критериям: точность передачи смысла (Accuracy), естественность языка (Fluency) и соответствие стилю оригинала (Scores). Это позволяет использовать метод для любых типов текстов. Например, с его помощью в новостях можно проверить точность передачи фактов, в постах соцсетей – выявить чрезмерную формальность фраз, а в художественных текстах – оценить стиль и плавность речи.

Исследователи отмечают, что методика не повышает качество перевода сама по себе и не вмешивается в работу нейросети. Но RATE позволяет с высокой точностью оценить, где именно современные модели ошибаются и что нужно улучшить, чтобы их переводы стали точнее и естественнее для пользователя.

Ранее сервис «Яндекс Карты» обновил свои голосовые подсказки, внедрив ИИ. Благодаря нейросети они стали более полезными и детальными.

Поделиться новостью