В Швейцарии создали национальную БЯМ

В Швейцарии запустили первую национальную большую языковую модель (БЯМ) с полностью открытым исходным кодом. За создание БЯМ отвечал консорциум государственных институтов, а сама инициатива позиционируется как альтернатива закрытым коммерческим продуктам.

Данный проект полностью открытый: опубликованы не только сама модель, но и весь процесс обучения – от исходных данных до документации. Обучение велось на массиве в 15 триллионов токенов, при этом более 40% данных – не на английском языке, что делает Apertus одной из самых многоязычных моделей на рынке. Всего поддерживается свыше 1000 языков.

Интересно, что БЯМ соответствует швейцарским и европейским требованиям в области защиты данных и авторского права, так как разработчики сделали упор на юридические вопросы. Это делает Apertus особенно привлекательной для локального бизнеса и государственных организаций, полагают эксперты.

Ранее ученые из США применили большие языковые модели (БЯМ) в качестве виртуальных помощников для биолога. Такой метод должен был ускорить разработку новых антител к разным типам вирусов. Таким образом, использование БЯМ позволило ученым создать 92 наноантитела, способных нейтрализовать новые штаммы SARS-CoV-2.