other

Архитектор ETL

5 ноября 2024

З/П не указана

Город: Санкт-Петербург

Тинькофф

Тип занятости: Полная занятость

Требуемый опыт: Опыт от 3 лет

У нас в DWH очень много данных: 6000 объектов, 200 тб в Greenplum и 2 пт в Hadoop. С данными активно работают более 400+ специалистов. На стороне команды DWH созданы инструменты, которые позволяют получать, обрабатывать, загружать и визуализировать данные. Наша инфраструктура: Greenplum / Hadoop / Clickhouse в качестве ядра обработки данных Собственные решения на базе Apache Zeppelin, Apache Airflow и Apache Flink в качестве инструментов трансформации данных для аналитиков (selfservice etl) Мы в поиске Архитектора, который займется выявлением операционной нагрузки в аналитическом хранилище, а также проработает архитектуру решения по вынесению операционной нагрузки из DWH Обязанности: Предстоит выстроить архитектуру хранения и обработки данных Развивать сервис обработки данных для операционной и регуляторной отчетности на основе компонент платформы данных Спроектировать методологии и подходы разработки потоков данных для операционной и регуляторной отчетности Заниматься гарантиями масштабируемости и отказоустойчивости сервиса Проводить регулярный аудит процессов разработки / поставки данных с целью формирования идей оптимизации и улучшения Требования: Опыт работы в сфере Data Architecture/DWH/ETL от 3-х лет Понимание архитектуры хранилищ и инструментов, которые с ним связаны Понимание бизнес-сценариев работы с данными Глубокое понимание жизненного цикла ETL пайплайнов и модели данных Опыт проектирования ETL-процессов в распределенных системах Хорошее понимание и опыт работы с MPP СУБД Опыт оптимизации процессов Мы предлагаем: Возможность работы в аккредитованной ИТ-компании Работу в офисе. График работы — гибридный Платформу обучения и развития Тинькофф Апгрейд. Курсы, тренинги, вебинары и базы знаний. Поддержка менторов и наставников, помощь в поиске точек роста и карьерном развитии Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким Компенсацию такси и 50% затрат на спорт от стоимости абонемента Компенсацию обедов. А если захотите перекусить, на каждом этаже есть кухня с чаем, кофе и фруктами Достойную зарплату — обсудим ее на собеседовании

Имя не указано

Откликнуться
Разместить Резюме
Пожаловаться ID: 115404592

Похожие вакансии

ETL-разработчик

Договорная

Санкт-Петербург

ICL Services

Разработчик ETL

Договорная

Санкт-Петербург

Нетрика Медицина

Разработчик ETL

Договорная

Санкт-Петербург

ЛАНИТ

Разработчик ETL

Договорная

Санкт-Петербург

Тинькофф

Data Engineer / ETL Developer

Договорная

Санкт-Петербург

Axenix (ранее Accenture)

Разработчик ETL\DWH (Junior)

Договорная

Санкт-Петербург

Газпром нефть