Data Engineer в платформу данных (Apache NiFi)

Мы развиваем собственную платформу, которая включает инструменты по получению, обработке, загрузке и визуализации данных. С помощью этих инструментов мы: — каждый день загружаем терабайты информации в единое хранилище данных (DWH); — приводим информацию в удобный для восприятия вид; — предоставляем пользователям доступ к данным; — даем пользователям возможность проводить анализ и строить отчеты и графики. Сейчас мы ищем дата-инженера, который поможет развивать наши продукты. Часть инструментов мы разрабатываем с нуля, часть — на основе open-source-решений: Apache Airflow, NiFi, Zepellin, Flink и других. Обязанности Участвовать в разработке ядра продуктов платформы данных Разрабатывать и оптимизировать процессы выгрузки данных Проводить код-ревью Разрабатывать сопроводительную документацию к продуктам Требования У вас есть опыт работы инженером или разработчиком от 3 лет Знаете язык программирования Java Знаете основы ООП, теорию алгоритмов и структуры данных Знаете SQL Умеете писать процессы загрузки данных (ETL) Знаете современные системы хранения данных (MPP и NoSQL) Знание Pandas, Numpy и Groovy на базовом уровне будет плюсом Знание Apache Kafka будет плюсом Мы предлагаем Работу в офисе у метро «Водный стадион». График работы — гибридный Платформу обучения и развития «Т‑Банк Апгрейд». Курсы, тренинги, вебинары и базы знаний. Поддержку менторов и наставников, помощь в поиске точек роста и карьерном развитии Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким Бесплатный фитнес-зал Т‑Банк Спорта или частичную компенсацию затрат на спорт Бесплатные обеды в Т‑Банке Кафе. А если захотите перекусить, на каждом этаже есть кухня с чаем, кофе и фруктами Линейку льготных тарифов на продукты Т-Банка Well-being-программу, которая помогает улучшить психологическое и физическое здоровье, а также разобраться с юридическими и финансовыми вопросами. Частичную компенсацию парковки 3 дополнительных дня отпуска в год Достойную зарплату — обсудим ее на собеседовании