Обязанности:
Мы «Деметра-Холдинг» – крупнейший в России вертикально интегрированный инфраструктурный холдинг, объединяющий активы в области экспортной логистики и трейдинга. Компания развивает собственную сеть элеваторов, владеет глубоководными морскими зерновыми терминалами и логистической инфраструктурой.Сейчас мы укрепляем нашу команду и находимся в поиске "Senior data engineer/ DWH architect». Задачи: Проектирование целевой архитектуры платформы данных; Разработка и внедрение компонентов платформы данных; Организация загрузки данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы); Создание SQL витрин и процедур; Формирование системы контроля и мониторинга целостности и качества данных; Подготовка и поддержание в актуальном состоянии каталога метаданных; Выстраивание процесса CI/CD совместно с DevOps; Code review и наставничество команды DE. Требования: Высшее образование (техническое, математическое, экономическое); Глубокое понимание принципов проектирования архитектуры хранилищ данных DWH (Data vault/Inmon/Kimball); Опыт проектирование и разработки хранилищ данных от 5 лет. В роли Team lead от 1 года; Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 2 лет; Уверенное знание SQL, опыт разработки сложных запросов и процедур в (MS SQL, Postgres - преимущество) от 5 лет; Опыт выстраивания CI/CD (DataOps); Опыт внедрения Kafka, RabbitMQ, dbt, Airflow, Greenplum/Clickhouse – сильное преимущество; Linux; Автономность, навыки самостоятельного поиска технических решений. Условия: Возможность реализовать ключевые проекты для компании. Конкурентоспособная з/п + годовой бонус; Гибридный или удаленный график работы (зависит от места проживания).Похожие вакансии