Мы - аккредитованная IT-компания и технологический партнёр для бизнеса. Наша компания усиливает команды клиентов через аутстаффинг и участвует в разработке сложных IT-продуктов.Мы ищем middle+ data-инженера и data аналитика на банковский проект Обязанности: Проектировать и развивать DWH и ETL-ландшафт под большие объёмы данных Разрабатывать и оптимизировать data pipeline’ы на Apache Spark Работать с Greenplum: оптимизация запросов, партиционирование, распределение данных Проектировать архитектуру потоков данных и моделей (в т.ч. Data Vault 2.0) Настраивать оркестрацию (Apache Airflow, dbt и др.) Обеспечивать качество данных: мониторинг, алертинг, автотесты Развивать CI/CD для ETL (Jenkins / GitLab CI) Участвовать в развитии data-платформы и архитектурных решений Менторить команду и формировать best practices Требования: от 4-х лет в Data Engineering / DWH Глубокая экспертиза в Spark (RDD, DAG, shuffle, performance tuning) Уверенные знания Greenplum / MPP-систем Опыт построения и оптимизации сложных ETL-пайплайнов Понимание архитектуры DWH и моделей данных (Data Vault, Star Schema и др.) Опыт работы с экосистемой: Kafka / Hadoop / S3 Владение Python и/или Java Опыт настройки ETL-инфраструктуры и оркестраторов Понимание мониторинга, качества данных и SLA Будет плюсом: Опыт миграции DWH (например, Oracle → Greenplum) Разработка внутренних ETL-фреймворков Опыт стандартизации процессов и data governance Наставничество Условия: Официальное трудоустройство в штат компании "Пятый элемент" Мы аккредитованная it компания, а это значит, что нашим сотрудникам доступна льготная ипотека для it специалистов, а также отсрочка от частичной мобилизации Работа полностью удаленно При необходимости выдаем технику ДМС+стоматология
Похожие вакансии