Обязанности: Подготовка и загрузка исходных данных. Источник данных Kafka, транспорт: Airflow. Реализация потоков загрузки данных на Airflow. Взаимодействие c аналитиком и заказчиком. Контроль качества, ревью кода, внутреннее тестирование, проведение ПСИ. Требования: Опыт работы с хранилищами данных и ETL. Уверенный пользователель Postresql, SQL, PL/pgSQL. Оптимизация. Чтение планов. Опыт работы с большими массивами данных. Партиционирование. Базовый или выше уровень работы с Python. Базовый или выше уровень работы с Airflow. Базовый или выше уровень работы с Kafka.
Похожие вакансии