Альфа-Банк Казахстан — Разработчик Hadoop

Разработчик Hadoop
Альфа-Банк Казахстан
600.000 to 1.000.000 KZT per month

Обязанности:
• Участие в вопросах выбора архитектурных и технологических решений
• Разработка промышленных решений, для пакетного и онлайн исполнения моделей
• Разработка промышленного ETL процесса поставки витрин и сопутствующих потоков данных
• Анализ данных в целевых источниках для внедрения модели/аналитического решения
• Анализ возможностей и адаптация моделей под Spark

Требования:
• Знание основных компонент инфраструктуры Hadoop, понимание принципов их работы (HDFS, YARN, Hive, HBase, Pig, Spark, Oozie)
• Уверенное владение Spark и опыт разработки приложений на Spark
• Опыт работы с потоковыми данными в Kafka + Nifi
• Знание и опыт программирования на Python
• Опыт работы с реляционными MPP-базами данных
• Опыт работы с Apache AirFlow
• Высшее образование, желательно техническое
• Знания Excel, SQL, Python и библиотек для машинного обучения (Scikit-learn, Pandas)

Будет плюсом:
• Знания: spark, scala, pytorch

Контакты:
BRashitov@alfabank.kz
@R_Bakir