Middle Data engineer at Petrel AI

Middle Data engineer
Petrel AI
800.000 to 1.000.000 KZT NET per month
Almaty / Remote

Проект на глобальном уровне для FMCG клиента

Обязанности:
• Организация витрин данных (Стек технологий: SQL, PySpark)
• Оптимизация хранилища данных
• Разработка и оптимизация ETL-процессов
• Разрабатывать надежные pipeline обработки данных
• Анализировать новые источники данных, настраивать процесс загрузки данных в Data Lake

Требования:
• 2-3 года опыта работы
• Уверенное знание Python
• Знание SQL, основных принципов работы реляционных и nosql СУБД, в т.ч. MPP
• Знание Apache Spark (pySpark/SQL)
• Понимание как работают облачные сервисы

Будет плюсом:
• Опыт с Azure Cloud (в частности с Azure Data Fabric)
• Опыт с Azure Cloud (в частности с Azure Databricks)
• Опыт разработки высокопроизводительных ETL-процессов на pySpark
• Опыт с Power BI

Контакты:
@aidostalk
a.kanaliyeva@petrel.ai