#вакансия #vacancy #seniordataengineer #batch #streamingpipeline Наш партнер - Компания, которая разрабатывает систему аналитики на маркетплейсах в поисках Senior Data Engineer ЗП: до 400 000 т.р. Нужен человек, который умеет: - Создавать batch и streaming pipeline-ы обработки данных - Разруливание зависимостей потоков данных - Оптимизация SQL запросов - Тестирование и мониторинг качества данных Нужно будет делать: - Обрабатывать данные парсинга и создавать стабильные пайплайны с хорошей очисткой данных и контролем качества - Интегрироваться с api маркетплейсов и создавать витрины на основе данных площадок и парсинга Что мы ищем в тебе: - Отличное знание SQL - Знание python на уровне senior разработчика - Хотя бы одно из, лучше все: athena/presto, spark, clickhouse, Trino - Опыт работы с большими массивами данных Желательно: - Опыт решения аналитических задач - Работа с luigi/airflow - Опыт работы с облачным стеком - Опыт работы с hadoop стеком Что мы предлагаем: - Конкурентоспособную “белую” зарплату - Дистанционную работу по Московскому времени - Участие в превращении старт-апа в большую компанию - Погружение в быстрорастущую индустрию e-commerce - Быстрый рост навыков (нужно будет делать быстро много нового, это большая нагрузка и быстрый рост) Откликнуться/задать вопросы: https://t.me/SHARK_IT