Канал, посвященный анализу данных с помощью Python. Не столько про машинное обучение, сколько про подготовку/очистку/предобработку данных, использование Python для получения данных из API, парсинга веб-сайтов, автоматизации различной рутины
Знакомые из Ozon принесли интересную вакансию — руководитель группы Data Engineer
Ребята ищут человека в команду DE Platform, которая выстраивает инфраструктуру для интеграции бизнеса и BI-систем. Эта же команда помогает в Ozon решать задачи по технологическому развитию инструментов и инфраструктуры вокруг данных
Задачи:
- Формрование и управление командой из 5-10 человек
- Построение архитектуры системы: развивать и поддерживать транспорт данных, планировать архитектурное развитие проектов
- Планирование работы (по спринтам, месяцам, кварталам)
- Организация работы со смежными командами
- Реализовать мониторинг, алертинг, анализ логов сервисов, анализ метрик БД и сервисов
- Оптимизация запросов (Vertica и Clickhouse)
- Airflow (написание новых ETL-процессов и рефакторинг старых)
Требования:Java, Hadoop (hafs, yarn, hive); СУБД (Postgres, MS SQL); аналитические БД (Vertica, Clickhouse, Bigquery); опыт работы с Kubernetes, Kafka, GIT, KV-хранилища; плюсом будет опыт работы с Prometheus, Grafana, Scala, AirflowУсловия:
- Удалёнка или офис (или гибрид);
- Система менторства, адаптации, обучения;
- ДМС (+ стоматология)
- Скидки на спорт и изучение английского
- Корпоративные клубы (киберспорт, кино, рисование, настолки, спорт, etc.)
- Помощь в отсрочке
- DevRel-команда и сильное сообщество
💬Отклик можно оставить на >сайте или написать напрямую Рите @margo1_ozon