Petrel AI Middle Data engineer Алматы 800к - 1млн тг на руки Возможность удаленной работы Особенности проекта: проект на глобальном уровне для FMCG клиента Задачи: - Организация витрин данных (Стек технологий: SQL, PySpark) - Оптимизация хранилища данных - Разработка и оптимизация ETL-процессов - Разрабатывать надежные pipeline обработки данных - Анализировать новые источники данных, настраивать процесс загрузки данных в Data Lake Must have: - 2-3 года опыта работы - Уверенное знание Python - Знание SQL, основных принципов работы реляционных и nosql СУБД, в т.ч. MPP. - Знание Apache Spark (pySpark/SQL) - Понимание как работают Облачные сервисы Nice to have: - Опыт с Azure Cloud (в частности с Azure Data Fabric) - Опыт с Azure Cloud (в частности с Azure Databricks) - Опыт разработки высокопроизводительных ETL-процессов на pySpark - Опыт с Power BI Контакты: @aidostalk [email protected]