Жаңалықтар

DSML Kazakhstan қауымдастығының соңғы жаңалықтары мен жаңартулары · Соңғы оқиғалардан хабардар болыңыз

103 жаңалық көрсетілді

Қазақ тіліндегі алғашқы Big Data митапы

Қазақ тіліндегі алғашқы Big Data митапы

20 маусымда data science, инженерия және аналитика саласындағы жетекші мамандардың басын қосатын қазақ тіліндегі Big Data Platform Meetup өтеді.

Кездесуде мамандар Machine Learning дегеніміз не, деректерді талдау не үшін қажет және деректерді сақтау, өңдеу мен автоматтандыруды қалай ұйымдастыру керегін түсіндіреді. Толық бағдарлама жақында ұйымдастырушылар арнасында жарияланады.

Тіркелу: bigdataplatform.kz

Қазақстан ICPC World Finals тарихындағы алғашқы алтынын алды

Бүкіл Қазақстан көптен күткен оқиға 🇰🇿

ICPC 2023 спорттық бағдарламалау бойынша әлем чемпионатының финалында қазақстандық Батыр Сардарбеков Harbour.Space University Barcelona командасының құрамында тарихи алтын медаль жеңіп алды 🏆

Қазақстандық спорттық бағдарламашылар ICPC жарыстарына 20 жылдан бері қатысып келеді. Еліміздің өкілі алғаш рет тарихи жетістікке — алтын медальға қол жеткізді. Батыр Сардарбековтің жеңісі Қазақстандағы осы зияткерлік спорттың дамуына үлкен серпін береді 🥇

🔹 2023 жылғы финалда еліміздің төрт командасы да өнер көрсетті: Astana IT University, Қазақстан-Британ техникалық университеті, Назарбаев Университеті және Халықаралық ақпараттық технологиялар университеті. Тартысты бәсекеде олар Сингапур ұлттық университеті мен Мельбурн университетін қоса алғанда, 54 команданы артта қалдырды.

🔹 2022 жылғы финалда Халықаралық ақпараттық технологиялар университеті мен Astana IT University командалары өнер көрсетіп, Кембридж және Вашингтон университеттерін қоса алғанда, 79 команданы артта қалдырды.

🌍 ICPC World Finals 2024 спорттық бағдарламалау әлем чемпионатын келесі болып Қазақстан қабылдайды. Финал қыркүйекте Астанада өтеді.

Командаларды құттықтаймыз, оларды мақтан тұтамыз және алдағы кәсіби жолдарына сәттілік тілейміз!

Beetech Conf баяндамашылардан өтінім қабылдайды

Beetech Conf | 27.04.2024 | Алматы

27 сәуірде Алматыда Beeline Қазақстанның жыл сайынғы Beetech Conf конференциясы өтеді.

Қатысушыларға барынша пайдалы, өзекті әрі қызықты кейстер ұсынылатын конференцияға баяндамалар қабылдау ашылды.

Өтінімдер 7 наурызға дейін қабылданады. Сілтеме арқылы өтіп, өтінім қалдырыңыз: Beetech 2024 Speakers.

Биыл үш бағыт болады: Big Data, Engineering және Management (Product + Agile).

Биылғы Big Data бағытының негізгі тақырыптары:

  • Өндірісте AI қолдану
  • Үлкен деректерді сақтау және өңдеу құралдары: Hadoop, Spark, Airflow немесе олардың баламалары
  • Машиналық оқыту жүйелерін пайдалану: CI/CD пайплайндары, MLOps және MLflow
  • Модельдер мен датасеттерді нұсқалау

Егер сізде басқа өзекті тақырып болса, өтінім бере аласыз — ол міндетті түрде қаралады.

Өтінімдер 7 наурызға дейін қабылданады: Beetech 2024 Speakers.

enbek.kz платформасында NLP негізіндегі жұмыс ұсыну жүйесі іске қосылды

Озық NLP модельдерін пайдаланып, үміткер түйіндемесі негізінде вакансия ұсынатын бірегей жүйе әзірлеген қауымдастық мүшесі Исағали Қонысбаевты құттықтаймыз.

Жүйе «Еңбек ресурстарын дамыту орталығы» АҚ IT мамандары және аналитиктерімен бірлесіп бейімделіп, enbek.kz платформасына енгізілді.

Сервис FastAPI, sentence_transformers және PyTorch негізінде жұмыс істейді. Жүйенің өзегі түйіндеме мен вакансия мәтінін embedding векторларына айналдыратын NLP моделінен тұрады. Вакансиялар өңір немесе мамандық секілді параметрлер бойынша сүзілгеннен кейін, осы векторлар вакансия векторлары мен түйіндеме сұрауының векторы арасындағы косинустық қашықтықты есептеуге қолданылады. Жүйе cosine similarity көрсеткіші бойынша ең жақын векторларды таңдайды.

Жүйенің ерекшелігі — тек қазіргі мамандықтар бойынша емес, үміткердің білімі, дағдылары және бұрынғы жұмыс тәжірибесінің семантикасы негізінде де үйренуі. Тек қазіргі мамандықтарға шамадан тыс бейімделіп кетпеу үшін Исағали соңғы модельді емес, оқыту ортасындағы checkpoint-ті пайдаланған.

Қосымша reranker жіктеу моделінсіз, тек retriever model қолданылғандықтан ұсыныстар жылдам беріледі. Модель ContrastiveLoss көмегімен оқытылды. Исағали басқа loss функцияларын зерттеп үлгермегенімен, жүйені одан әрі жақсартудың әлеуеті жоғары.

«Еңбек ресурстарын дамыту орталығы» АҚ баспасөз хабарламасына сәйкес, жоба кадр іріктеудегі маңызды инновацияны көрсетіп қана қоймай, еңбек нарығының нақты міндеттерін шешуде NLP қолданудың жаңа мүмкіндіктерін ашады.

DSML KZ мүшелері Higgsfield ML кітапханасын шығарды

Қауымдастығымыздың мүшелері Ерзат Дулат пен Анвар Умаров жақында Higgsfield атты машиналық оқыту кітапханасын шығарды.

Бұл құрал кластерлерді басқарып, олардың масштабталуы мен ақауға төзімділігін қамтамасыз етеді.

Кітапхана GPU кластерін тиімді пайдаланып, қуаты ChatGPT-пен салыстыруға келетін жүйелер құруға мүмкіндік береді.

Блог жазбасын мына жерден оқуға болады.

Баршаңызға сәтті эксперименттер тілейміз! 🚀