Обязанности:
О нас: Мы в «АйДи Инжиниринг» создаём цифровые продукты для сложных инженерных задач. В нашей команде ценят профессионализм, инициативу и стремление делать качественный продукт. Сейчас мы ищем дата-инженера, который поможет нам развивать инфраструктуру данных. Чем предстоит заниматься: Принять текущую инфраструктуру, провести её аудит и предложить улучшения; Проектировать и разрабатывать ETL/ELT-процессы на Python и Apache Airflow для сбора данных из разных источников; Проектировать архитектуру хранилища в Greenplum, работать с витринами данных и оптимизировать тяжёлые SQL-запросы; Собирать дашборды в Apache Superset вместе с внутренними заказчиками, чтобы данные работали на бизнес; Настраивать мониторинг и алертинг для бесперебойной работы пайплайнов. Наш стек: Python, SQL, Apache Airflow, Greenplum, Apache Superset, Docker (Linux). Наши ожидания: Мы ищем инженера с опытом от 3 лет, который не боится брать задачи в работу и доводить их до результата. Ключевые навыки: Языки: уверенный Python (Java — плюс); Базы данных: глубокое знание SQL, опыт с Greenplum (или аналогами: ClickHouse, PostgreSQL на больших объёмах); ETL/Хранилища: опыт работы с Airflow, понимание принципов построения DWH/Data Lake; Надёжность: опыт настройки мониторинга (Zabbix, Graylog, Superset), обработки ошибок и тестирования; Инфраструктура: уверенное знание Linux, опыт с Docker и Kubernetes будет преимуществом. Личные качества: Продуктовое мышление: вы понимаете, что данные нужны для решения бизнес-задач; Самостоятельность: умеете работать автономно и брать на себя ответственность за результат. Что мы предлагаем: Интересные задачи на стыке инженерии и бизнеса; Возможность влиять на развитие инфраструктуры данных; Работу с современным стеком технологий; Официальное трудоустройство и комфортные условия работы в офисе в центре Санкт-Петербурга. Будем рады познакомиться, если вам близко такое видение работы с данными!Похожие вакансии
Договорная
Санкт-Петербург. Станции метро: Чкаловская, Горьковская, Петроградская, Чёрная речка
Т-Банк
Разработчик (BIM / .NET) в отдел цифровых решений
Договорная
Санкт-Петербург. Станции метро: Чкаловская, Горьковская, Петроградская, Чёрная речка
АРЕАЛ
Договорная
Санкт-Петербург. Станции метро: Чкаловская, Горьковская, Петроградская, Чёрная речка
Газпромнефть-Снабжение
От 85 000 руб.
Санкт-Петербург. Станции метро: Чкаловская, Горьковская, Петроградская, Чёрная речка
Aston
От 85 000 руб.
Санкт-Петербург. Станции метро: Чкаловская, Горьковская, Петроградская, Чёрная речка
Aston
Специалист технической поддержки в отдел цифровых и ИТ-решений
Договорная
Санкт-Петербург. Станции метро: Чкаловская, Горьковская, Петроградская, Чёрная речка
АРЕАЛ