Яндекс представил языковую модель Alice AI Foundation LLM

«Яндекс» разработал крупную языковую модель Alice AI Foundation LLM, полностью созданную без использования иностранных компонентов. Об этом сообщают «Ведомости» со ссылкой на представителя компании.

Модель включает 80 миллиардов параметров, из которых активны 3 миллиарда. Обучение проводилось на базе 18 триллионов токенов.

Alice AI Foundation LLM ляжет в основу будущих рассуждающих моделей и расширит агентные возможности «Алисы AI».

«Яндекс» сделал параметры модели доступными под лицензией, которая позволяет использовать её в коммерческих и исследовательских проектах. Разработчики могут самостоятельно запускать и дообучать модель.

Затраты на разработку компания не обнародовала. Оценки различаются из-за разных методик подсчёта.