SHERKALA: первая революционная AI-модель для казахского языка

6 минут STEPPE
SHERKALA: первая революционная AI-модель для казахского языка
Партнерский

Inception и MBZUAI представили SHERKALA — революционную языковую модель для казахского языка.


Inception (G42), ведущий разработчик AI-решений, совместно с Университетом Искусственного Интеллекта Мохаммеда бин Зайеда (MBZUAI) при поддержке Cerebras объявили о запуске SHERKALA первой высокоточной казахской языковой модели (LLM). Этот инновационный проект направлен на расширение возможностей более 13 миллионов носителей казахского языка, обеспечивая им доступ к передовым технологиям генеративного ИИ.

SHERKALA — это модель с 8 миллиардами параметров, обученная на 45 миллиардах слов. Основное внимание уделено казахскому языку, но также поддерживаются английский, русский и турецкий. В основе модели лежит Llama 3.1, адаптированная для казахского языка с расширением токенизатора на 25%, что повышает эффективность понимания и генерации текста. Обучение модели проходило на Condor Galaxy — одном из самых мощных суперкомпьютеров для ИИ, созданном G42 и Cerebras.

«‎Запуск SHERKALA – это важный шаг в поддержке языковых сообществ, которые раньше были недостаточно представлены в AI. Вместе с MBZUAI мы создали модель, которая поможет носителям казахского языка и изменит рынок LLM, сделав технологии более доступными и эффективными. С моделями JAIS для арабского, NANDA для хинди и теперь SHERKALA для казахского мы продолжаем расширять границы AI и обеспечивать языковое разнообразие в цифровом мире»‎, — отметил д-р Эндрю Джексон, CEO Inception.

SHERKALA задает новый стандарт для казахских языковых моделей, превосходно справляясь с пониманием и созданием текстов. Благодаря эффективной работе с токенами и продвинутым диалоговым возможностям она обходит более крупные модели, включая те, что в несколько раз превышают её по числу параметров.

«‎Мы рады работать с Inception над SHERKALA — передовой казахской AI-моделью. Этот проект способствует развитию рынков, делает AI доступнее, сохраняет язык и поддерживает цифровые сообщества»‎, — заявил профессор Преслав Наков, заведующий кафедрой и профессор обработки естественного языка в MBZUAI.

SHERKALA теперь доступна как open-source модель на Hugging Face:

🔗 SHERKALA на Hugging Face

Еще много интересного

Статьи STEPPE

Как CCI Казахстан помогает сохранить водные ресурсы в условиях дефицита

Как CCI Казахстан помогает сохранить водные ресурсы в условиях дефицита

22 марта отмечается Всемирный день водных ресурсов — день, подчеркивающий значимость бережного отношения к воде. В условиях,...

10 минут
10 минут
SPIKING: премьера нового вида преступления в Chaplin Cinemas
Партнерский

SPIKING: премьера нового вида преступления в Chaplin Cinemas

Спайкинг — это преступление нового времени, при котором в напитки подмешивают химические вещества или сильнодействующие...

8 минут
8 минут
Искусство дарить: как менялась традиция дарить подарки сквозь время
Партнерский

Искусство дарить: как менялась традиция дарить подарки сквозь время

С приближением Наурыза наступает время теплых встреч, щедрых угощений и, конечно, подарков. Подарки — это больше, чем просто...

17 минут
17 минут
Mary Kay представили новую коллекцию ароматов по настроению

Mary Kay представили новую коллекцию ароматов по настроению

С приходом весны хочется обновлений, ярких эмоций и особенных моментов. Новый сезон — это отличное время, чтобы дополнить свой...

9 минут
9 минут