Обязанности:
Наш партнер - крупная FMCG компания открывает позицию Data Engineer Предстоящие задачи: Разрабатывать витрины данных в рамках проекта RC Data Lake; Интегрировать источники данных в RC Data Lake на платформе Yandex Cloud; Обрабатывать потоковые данные (streaming); Контролировать качество загружаемых данных; Проводить код ревю; Отвечать за оптимизацию, рефакторинг и поддержку решений; Требования: Опыт от 3-х лет в роли Data Engineer; Отличное знание SQL, python, PySpark/Scala; 2+ года опыта работы с облачными платформами Yandex Cloud Platform/ Azure/ AWS; Опыт работы в проектах с использованием · Kafka, CDC-решений S3, Airflow, Apache Spark, Clickhouse, Postgres Опыт работы с Docker, Kubernetes; Понимание работы CI/CD процессов; Знание Git; Опыт работы с GitLab; Английский на уровне не ниже intermediate; Мы ждем что вы: Понимаете основные структуры данных Понимаете ETL процессы Разбираетесь в современных хранилищах данных Умеете разбираться в новых инструментах и фреймворках, а также в их работе под капотом. Умеете работать самостоятельно и в команде Мы предлагаем: Оформление по ТК Конкурентная заработная плата (финансовые условия обсуждаются с успешным кандидатом) ДМС Полностью удаленный формат работыПохожие вакансии