Обязанности: Подготовка и загрузка исходных данных. Источник данных Kafka. Оптимизация процессов загрузки данных и формирование истории SCD2. Реализация потоков загрузки данных на Airflow. Взаимодействие аналитиком и заказчиком. Контроль качества, ревью кода. Требования: Опыт работы с хранилищем данных и реализации витрин. Уверненый пользователель Postresql, SQL, PL/pgSQL. Оптимизация.Чение планов. Опты работы с большим массивом данных. Партиционирование. Базовый или выше уровень работы с Python. Базовый или выше уровень работы с Airflow. Базовый или выше уровень работы с Kafka.
Похожие вакансии