Новости

Отличные новости для всех, кто интересуется адаптацией LLM под казахский язык!

Мемберы нашего сообщества Санжар Мурзахметов @stringersolo , Бексултан Сагындык @bsagyndyk и Кирилл Якунин @JenarosHat выпустили серию бенчмарков на проверку language understanding, ризонинга и прочих особенностей казахского языка.

1) Ребята перевели несколько популярных датасетов на казахский:
• MMLU на казахском: Проверка мультизадачного языкового понимания.
• GSM8K на казахском: Тестирование математической логики.

2) Были созданы кастомные казахстанские multiple-choice (MC) бенчмарки
• Kazakh Constitution MC: Проверка юридических и гражданских знаний.
• Kazakh Dastur MC: Понимание культурного наследия и обычаев.
• Unified National Test MC: История, литература, биология и другие предметы.

Команда работает над созданием открытого лидерборда по этим бенчмаркам и платформы, где можно будет тестировать и сравнивать модели, разработанные для казахского языка.

Подробнее о проекте можно почитать в их LinkedIn посте

Поздравляем нашего товарища из DSML KZ @zangir_iklassov@zangir_iklassov с успешной защитой PhD диссертации! 🎉
🎉

Зангир исследовал, как нейронные сети и reinforcement learning могут ускорить поиск решений комбинаторных задач (маршрутизация, управление ресурсами, планирование) и представил следующие проекты:

• Новый подход обучения для планирования производства, где сложность задач повышается динамично, что улучшает обучение моделей.
• RL framework для решения задач маршрутизации с учетом стохастического времени перемещения по графу.
• Новая стратегия самонаправленного поиска по использованию больших языковых моделей для эффективного решения комбинаторных задачах.

Данные работы были опубликованы в IJCAI23, ACML23, IEEE Access, NeurIPS24.JCAI23, ACML23, IEEE Access, NeurIPS24.

MBZUAI - первый в мире университет, посвященный искусственному интеллекту, открытый в 2019 году в Абу-Даби и входящий в топ-20 по направлению AI/ML. Зангир стал третьим успешно защитившимся PhD кандидатом в истории MBZUAI!

Кстати, недавно стартовал прием документов на программы магистратуры и PhD в MBZUAI на осень 2025 года. В университете есть пять направлений: ML, CV, NLP, CS и Robotics. Дедлайн подачи первого батча заявок: 15 января 2025.

Исследование Kolesa Group 3.0

Kolesa Group провели третье исследование казахстанского рынка data-профессий.

Выяснилось, что профессия повзрослела с 2021 года: в сравнении с результатами прошлого исследования специалистов 26-30 лет стало больше на 15%. Доля специалистов в Алматы и Астане выросла на 6%. За три года вырос и общий стаж работы аналитиков, специалистов с опытом от 3 до 5 лет выросло с 38% до 49%.

Зарплаты:
• Data Science — 825 000 тенге, медиана — 1 099 576 тенге;
• Data Analysis — 650 000 тенге, медиана — 857 485 тенге;
• BI — 650 000 тенге, медиана — 726 639 тенге;
• DWH — 824 000 тенге, медиана — 1 081 145 тенге;
• ML — 1 350 000 тенге, медиана — 1 600 769 тенге;
• Прочее — 925 000 тенге, медиана — 929 180 тенге.

За последние три года средняя заработная плата увеличилась примерно на 40%. Количество аналитиков, работающих в финтех-компаниях, возросло на 17%. Удаленная работа (42%) больше ценится среди респондентов, чем корпоративная культура компании (35%).

Также как и ранее, для нашего сообщества были предоставлены сырые данныесырые данные

Митап для NLP специалистов от Beeline Kazakhstan и QazCode | 24.10.2024, 17:00 | Almaty

24 октября в DAR U мы подискутируем о языковых моделях! Data Scientist QazСode (Beeline) Бексултан Сагындык поделится свежими трендами в NLP и расскажет, как казахский язык интегрируется в эпоху LLM. Бексултан - один из тех, кто разрабатывает ИИ на казахском в Beeline Казахстан и QazCode.

А после - квартирник с экспертами из QazCode, Big Data Team и Conformal Group, с дискуссией об NLP в бизнесе: как применять LLMs в реальных кейсах.

Дата: 24.10, 17:00
Место проведения: DAR U, Коктем-2, 22, 4 этаж

Мероприятие бесплатное, но количество мест ограничено, регистрация по ссылке