Khan of data & analytics🎲

Первый казахский лидерборд запущен! 🇰🇿

Так, тут большое событие! Мои друзья из прошлого поста сдержали обещание и выпустили лидерборд на основе бенчмарков, о которых мы говорили ранее. Вот ссылка: https://huggingface.co/spaces/kz-transformers/kaz-llm-lb

Что это значит для нашего языка и страны?

Это огромный шаг для развития технологий на казахском языке! 🔥 Мы впервые видим инициативу, которая системно поднимает уровень AI-моделей для родного языка.
Раньше казахский часто оставался на задворках крупных AI-разработок. Этот лидерборд — шанс исправить ситуацию:
- Стимул для открытых исследований. Разработчики по всему миру могут вносить вклад и улучшать модели на казахском.
- Поддержка локальных разработчиков. Появляются метрики и инструменты, которые помогают создавать качественные продукты.
- Инвестиции в будущее. Это закладывает основу для технологий, которые будут полезны бизнесу, образованию и государственным проектам.

Итоги первого запуска:

-- Открытый сегмент:
Лидирует ISSAI с моделью LLaMA-3.1-KazLLM-1.0-8B, которая дала +5% к своему бэкбону и обошла Google Gemma-2-9b-it на 1%.
-- Все модели:
Абсолютный лидер — GPT-4o, который опережает ближайшего конкурента Sonnet 3.5 на 2%.

Что дальше?

1. Оффлайн арена с системой рейтинга ELO (духи шахмат уже ликуют!)
2. Более сложные бенчмарки для реальных задач. Это поможет проверить модели в боевых условиях.
3. Кастомные instruct-датасеты. Пора учить AI понимать наши реальные потребности.

Ребята открыты к предложениям и готовы сотрудничать! 🙌 Фидбек, новые идеи или сабмит своей модели — все это можно сделать через GitHub или кнопку Submit на HuggingFace.

Давайте покажем поддержку!
🔗 Репостните, чтобы больше людей узнали о нашем лидерборде.
📢 Чем больше участников и идей, тем быстрее наш язык получит достойное представительство в мире AI.

Подключайтесь! 💪💪💪

Всем привет!

Очень нужна ваша поддержка для школьников-стартаперов из команды MOMENTUM AI! 🎉

Наши ребята участвуют в конкурсе High School Start-up League — международном соревновании стартапов среди старшеклассников. Конкурс организован совместно с Masters Union (университет бизнеса и экономики из Индии) и впервые проводится в Казахстане в сотрудничестве со Spectrum School.

В первом этапе в Астане участвовало около 170 человек и 17 команд. В результате отбора выбрали 4 лучшие команды, и MOMENTUM AI — одна из них! 🚀 Теперь перед ребятами стоит задача попасть в ТОП-15 мирового рейтинга на основе голосования. Конкуренция жесткая — команды со всего мира! 🌍

Цель конкурса — помочь школьникам развивать свои инновационные идеи. Топ-15 команд получат уникальную возможность презентовать свои проекты международным инвесторам и продолжить развивать свои стартапы.

На данный момент MOMENTUM AI занимает 1 место среди казахстанских команд, но в мировом рейтинге пока только на 26 месте.

Давайте поддержим наших ребят! Ваш голос может реально помочь им выйти в ТОП и представить Казахстан на мировом уровне! 🙌

Vote for Momentum AI
More than 30% of computer users struggle to locate and organize their files cluttered across their devices, decreasing their efficiency and productivity while performing assignments (e.g. school, job, meetings, etc).


That is why we’ve created MOMENTUM AI, the AI which is capable of sorting your documents in a Moment
Vote for Momentum, vote for the future of innovations, make an Impact

🗳Here to vote: https://mastersunion.org/events/hssl-leaderboard-details/67513adf30ca264e0eff503d
Our instagram: https://www.instagram.com/m0mentum.a1/profilecard/?igsh=d2QzdXAxMW0wcW94

Спасибо за поддержку! ❤️

Тут классные новости 🔥🔥🔥

Мои друзья Бексултан и Санжар, специалисты в области NLP/DL, объединились для решения важных проблем в разработке казахских LLM моделей и выпустили два набора данных:

1️⃣ Оценка понимания и логического мышления:
• MMLU переведенный на казахский (KK): Адаптация многозадачного языкового понимания на казахском языке. ссылка
• GSM8K переведенный на казахский (KK): Проверка математической логики и мышления. ссылка

2️⃣ Знания, специфичные для Казахстана:
• Казахская Конституция MC: Оценка юридических и гражданских знаний. ссылка
• Казахские традиции MC: Особенности культурного наследия и традиций. ссылка
• Единое национальное тестирование MC: Включает темы по казахской истории, литературе, географии и другим предметам. ссылка

Эти данные помогут моделям LLM не только отвечать на вопросы, но и глубже понимать богатую культуру казахского народа, что позволит применять эти знания на практике. Без таких датасетов модели будут отставать в качестве, особенно когда речь идет о локальных особенностях. А эти данные — как раз мост между нашими реалиями и технологиями. Это шаг к тому, чтобы казахский язык уверенно чувствовал себя в мире больших данных и искусственного интеллекта. 🚀🇰🇿

подробности в LinkedIn пост