Обязанности:
В связи с активным развитием компании в нашу команду мы ищем единомышленников, фанатов девелопмента. На данный момент мы рассматриваем кандидатов на позицию Инженер данных (Data Engineer) Задачи и функционал на этой позиции: Разработка, развитие и сопровождение корпоративного хранилища данных Проектирование и реализация ETL/ELT-процессов для загрузки и трансформации данных Разработка dbt-моделей, построение витрин данных и обеспечение качества данных Создание и сопровождение DAG'ов в Apache Airflow для автоматизации процессов обработки данных Разработка потоковых и пакетных интеграций с использованием Apache Flink Работа с аналитической MPP-системой StarRocks: разработка SQL-запросов, оптимизация производительности, проектирование структуры хранения данных Работа с объектным хранилищем MinIO: организация хранения и обработки данных Анализ требований заказчиков и интеграция новых источников данных (API, CDC) Мониторинг, сопровождение и устранение инцидентов в зоне ответственности Подготовка и актуализация технической документации Взаимодействие с аналитиками, разработчиками и смежными командами при реализации проектов Ожидания от успешного кандидата: Опыт работы инженером данных или ETL-разработчиком от 3 лет Опыт разработки моделей данных в dbt Владение Python для разработки ETL-процессов и автоматизации Опыт работы с Apache Airflow Опыт работы с Linux, SSH, Bash Опыт работы с Git Опыт работы с одной или несколькими реляционными СУБД (PostgreSQL, MS SQL Server, Oracle, MySQL и др.) Хорошее знание SQL (JOIN, CTE, оконные функции, оптимизация запросов, анализ планов выполнения) Понимание принципов построения ETL/ELT-процессов Опыт работы с объектными хранилищами S3/MinIO Понимание принципов работы Apache Kafka Будет преимуществом: Опыт работы со StarRocks или другими MPP СУБД (ClickHouse, Greenplum и др.) Опыт оптимизации производительности SQL-запросов и моделей данных Понимание архитектуры современных Data Lakehouse платформ Понимание потоковой обработки данных и опыт работы с Apache Flink Опыт работы с Docker Понимание принципов Data Vault, Data Warehouse. Работа в GloraX - это: Работа в динамичной прогрессивной компании – лидере рынка Возможность создавать уникальные проекты в сфере жилой и коммерческой недвижимости График работы 5/2, гибкое начало рабочего дня Возможность гибридного или полностью удаленного режима работы Комфортный офис Конкурентный доход (оклад и премии) «Белая» компания, соблюдение ТК РФ ДМС, программа лояльности на приобретение проектов компании, корпоративная мобильная связь Сильная команда и доброжелательная рабочая атмосфера Современная корпоративная культура в стиле GloraХ.Life, прокачаем вместе сферы: здоровье, семья, спорт, саморазвитиеПохожие вакансии
Договорная
Москва. Станции метро: Войковская
Федеральное автономное учреждение «Национальный институт аккредитации» (ФАУ НИА)