Обязанности:
Предстоит: • Разработка фреймворка ETL оркестрации. • Разработка DevOps процессов (пайплайнов). • Разработка процессов загрузки данных из систем источников, процессов архивной и инкрементальной загрузок, процессов трансформации данных и построения витрин данных. • Проектирование потоков данных, интеграционных решений. • Анализ требований на разработку и проектирование ПО. • Участие в процессах сопровождения и внедрения ПО. • Согласование спецификаций на разработку ПО, архитектуры, ТЗ, модели данных, в случае привлечения к разработке внешних ресурсов или других команд. • Участие в приемо-сдаточных испытаниях. • Сопровождение внедрённых решений. Ожидаем: • Опыт работы в роли Python разработчика от двух лет. • Опыт работы с Airflow. • Опыт проектирования и разработки ПО, знание принципов ООП. • Опыт работы с ETL/ELT инструментами и практиками, разработки и развития витрин данных, принципов построения и наполнения DWH. • Опыт оркестрации ELT пайплайнов в Airflow в кластерных решениях (развёрнутый на CeleryExecutor, KubernetesExecutor конфигурациях). • Опыт репликации данных между DWH и источниками. • Опыт построения DevOps пайплайнов (Git, TeamCity, BitBucket, Nexus, Docker или аналогичном стеке). Сборка, тестирование, доставка на целевые среды. • Уверенный пользователь Linux / bash скриптование. Будет плюсом знание: dbt, Impala, greenplum, spark, Hadoop стек. Предлагаем: • Созидательная среда и интересные проекты• Работа в команде профессионалов. Неравнодушных, активных, ответственных за свой результат.• Конкурентная заработная плата и система премирования.Привлекательный социальный пакет:- медицинская страховка с первого месяца работы- отпуск 33 календарных дня- материальная помощь и дополнительные выплаты- дисконтные и корпоративные программы компаний-партнеров• Обширные возможности для всестороннего развития и расширения кругозора сотрудников:- программы по развитию профессиональных знаний, личных качеств, управленческих компетенций- ГПБИнтеллекторий, КВИЗы, Спартакиада, программы Трансформации Духа, разума и силы – лайфхаки от гуру в различных областях- знакомство и обмен опытом с коллегами из других подразделений и других городов- танцы, занятия по вокалу, актерскому мастерству – это только малая часть айсберга корпоративно-культурной жизни, предлагаемой сотрудникам.• Комфортные условия работы. Возможна "удаленка" в пределах РФПохожие вакансии