#вакансия#Москва#Hadoop#ETL#vacancy#Middle#Senior#полныйдень#Dataengineer#ML👆 Наша компания сейчас в поисках крутого коллеги – Data/ML Инженер.
👩💻🧑💻Полная занятость, Москва, м. Ленинский проспект.
✍️Почему мы можем быть вам интересны:
- Достойный уровень оплаты, все прозрачно указано в договоре, все строго по ТК.
- Мы заинтересованы в росте квалификации специалиста, готовы оплатить сертификации по согласованию с менеджером.
- По-настоящему профессиональная и опытная команда, где есть у кого поучиться.
Разрабатываемая нами информационная платформа – высоконагруженное решение, призванное обеспечить достижение всех этих целей.
Текущий инструментальный стек платформы:
• Python, Java
• Informatica PowerCenter
• Kafka, AirFlow
• InfluxDB, kdb+, OneTick
• MS SQL, PostgreSQL, MongoDB
• Grafana, Qlik Sense, Kibana, ELK
• OpenShift
• Python ML/DL libraries, PySpark, TensorFlow.
Теоретические знания:
1. Процессы сбора данных
a. ETL / ELT – примеры, назначение и подходы к использованию
b. Интеграционные шины – примеры, назначение и подходы к использованию
c. Оркестраторы – примеры, назначение и подходы к использованию
d. Лямбда-архитектура, streaming и batch режимы загрузки данных - назначение и особенности использования
2. СУБД и модели данных
a. Нормализованные и денормализованные модели данных: 1NF, 2NF, 3NF, Data Vault, Star и Snowflow scheme – назначение и принципиальные отличия
b. Row и Column based БД – примеры, назначение и подходы к использованию
c. Индексы, партиционирование - какие бывают, примеры использования
d. Планы запросов, типы join-ов: nested loops, merge join, hash join. Чем отличаются.
Уверенные практические навыки (hand zone):
Практический опыт работы кандидата в активной фазе – то, что ежедневно практикуется в течение последнего года по направлениям:
1. Процессы сбора данных (практика использования конкретных инструментов)
a. ETL / ELT
b. Интеграционные шины
c. Оркестраторы
d. Streaming и Batch режимы загрузки данных
2. СУБД и модели данных
a. Нормализованные и денормализованные модели данных: 1NF, 2NF, 3NF, Data Vault, Star и Snowflow scheme
b. Row и Column based БД
3. SQL
a. ANSI SQL
b. Процедурный SQL
c. Оптимизация SQL-запросов
d. Транзакции в T-SQL (Oracle)
e. Индексы в T-SQL (Oracle)
f. Опыт работы с аналитическими (оконными) функциями
Контакты: @@work20202020