Обязанности:
Big Data МТС – место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько десятков сервисов. Самые успешные из них уже стали частью экосистемы МТС. Например, МТС Маркетолог, рекомендации в KION (МТС ТВ), услуга “Кто звонит?” или Спам blacklist. Кого мы ищем? Команда центра Big Data в поиске Data Engineer на продукт Nuum Nuum — видеосервис, который совмещает в себе функции YouTube, TikTok и Twitch. Платформа уже доступна в браузере и в виде мобильных приложений для Android и iOS Стек: Python, PostgreSQL, Aerospike, Kafka, Airflow, Clickhouse, Pyspark, Hadoop Обязательно: Опыт разработки ETL/ELT-процессов Умение работать с докерами и шедулерами (airflow или опыт с аналогами) Отличное знание SQL и Python Будет плюсом: опыт работы со стеком технологий Hadoop, Spark, Hive, опыт разработки процессов обработки сложных событий (CEP) во времени, приближенном к реальному, на Kafka Streams, Flink, опыт проектирования хранилищ данных и понимание устройства современных реляционных баз данных Что предстоит делать? Вместе с ML-инженерами проектировать и создавать витрины для унификации пайплайнов обработки данных для рекомендательных систем Разрабатывать и поддерживать ETL-процессы Реализовывать пайплайны near-realtime обработки данных Настраивать DQ мониторинг и алертинг Обрабатывать и создавать витрины на основе действий пользователей на платформе Условия: каждый месяц - аванс и зарплата, дважды в год - премия. ДМС + стоматология, корпоративная связь, специальные предложения от партнеров и друзей МТС, отпуск 31 день в год. Выдаем 16 MacBook Pro или Dell на выбор. Есть ли обучение? Локальные конференции, митапы Корпоративный университет МТС и масштабная виртуальная библиотека А ещё мы регулярно обмениваемся опытом на совместных синках с лидами экспертизы Какой график? Гибкое начало рабочего дня в промежутке с 8 до 11. Есть возможность работать несколько дней вне офиса по договоренности с командой. Сколько этапов при отборе? Не более трех: HR + первое тех. интервью с лидом направления Тестовое задание/второе интервью - по необходимости Собеседование с PO и командой, выбор кандидатом проектаПохожие вакансии