ИИ поможет ученым в работе c восточными языками

Специалисты «Яндекса» и Института востоковедения РАН разработали ИИ-помощника, которым смогут воспользоваться ученые, работающие с источниками из стран Азии, Африки и Ближнего Востока. Он в сотни раз ускоряет анализ данных и обрабатывает до тысячи источников в день. 

«До недавнего времени ученые сталкивались с тем, что анализ материалов на оригинальных языках занимал много времени и ограничивал количество обрабатываемых источников. С помощью ИИ этот процесс ускоряется: время поиска и анализа сокращается в шесть-восемь раз – с нескольких часов до 10-15 минут на одну исследовательскую задачу. Это дает исследователям возможность обрабатывать больше материалов ежедневно, проводить более глубокий анализ и получать полное представление о тенденциях в регионе», – рассказал IT Speaker Александр Костыркин, старший научный сотрудник Лаборатории цифровых исследований современного Востока Институт востоковедения РАН. 

ИИ-помощник разработан на базе платформы Yandex AI Studio. Для информационного наполнения использовался архив востоковедных знаний, в который вошли монографии, научные статьи сотрудников РАН и другие материалы. Базу ассистента составили более 1,5 млн документов, представленных в четырех вариантах китайского языка: континентальном, тайваньском, гонконгском и сингапурском. 

ИИ-решение может работать с научными текстами, выделяя в них ключевые факты и формируя краткую аналитическую сводку. Помощник также анализирует китайские СМИ и создает дайджесты на русском языке, что позволяет исследователям оперативно получать информацию о событиях в регионе.

«Востоковедам особенно важно работать с первоисточниками – понимать язык, контекст и логику региона, о котором они пишут. Искусственный интеллект позволяет сделать это быстрее, точнее и глубже. Наша цель – чтобы технологии помогали ученым видеть больше и работать с данными, которые раньше были труднодоступны», – прокомментировала Анна Лемякина, директор по национальным и стратегическим проектам Yandex Cloud. 

На данный момент ИИ-помощник находится на этапе тестирования и доступен для сотрудников Института востоковедения РАН. Позже будет размещен для всех исследователей в открытом доступе. Также в будущем планируется расширить языковую поддержку, добавив японский, арабский, турецкий, персидский и другие восточные языки.  

Ранее российские ученые разработали ИИ, который может переводить иероглифы эпохи Древнего Египта. Специалисты обучали модель на самом полном собрании древнеегипетских текстов Thesaurus Linguae Aegyptiae.