Обязанности:
Разработка сервисного ядра хранилища. Реализация нового функционала для разработки витрины данных на GP. ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ: Разрабатывать и развивать внутренний framework для построения корпоративного DWH; Проектировать и реализовывать универсальные механизмы загрузки и трансформации данных; Разрабатывать решения для автоматизации создания витрин и ETL-процессов; Оптимизировать производительность Greenplum и повышать эффективность работы платформы; Разрабатывать интеграции с внешними источниками данных (PXF и другие механизмы); Создавать и поддерживать DAG'и в Airflow; Разрабатывать сервисы и утилиты на Python; Участвовать в проектировании архитектуры платформы данных и определении технических стандартов; Проводить код-ревью и участвовать в принятии архитектурных решений. МЫ ЖДЕМ ОТ ВАС: Отличное знание Greenplum и понимание его внутреннего устройства; Глубокие знания SQL и опыт оптимизации сложных запросов; Практический опыт работы с: PXF; партиционированием; распределением данных; MPP-архитектурой; анализом производительности и оптимизацией запросов. Уверенное владение Python; Опыт разработки и сопровождения пайплайнов в Apache Airflow; Понимание принципов построения корпоративных DWH и ETL/ELT-процессов; Опыт проектирования архитектурных решений и разработки внутренних платформ или библиотек. Будет плюсом Опыт разработки собственных framework или платформенных решений; Знание PostgreSQL на уровне внутренних механизмов; Опыт работы с Git, CI/CD; Опыт работы с контейнеризацией (Docker/Kubernetes); Понимание принципов DataOps. МЫ ПРЕДЛАГАЕМ: - Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д); - Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы; - Забота о вашем здоровье: ДМС после испытательного срока, куда входит стоматология; - Гибкий график; - Комфортные и современные офисы; - Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (скидки на спортзалы, рестораны, маркетплейсы и т.д.).Похожие вакансии