Сегодня билайн — компания изменений, чутко реагирующая на потребности рынка и людей. А ещё билайн — это команда, объединённая общими ценностями и общей целью — быть лидером телеком и digital рынков, предоставляя нашим клиентам новейшие продукты и услуги, а также сервис самого высокого уровня. Сейчас у вас есть возможность присоединиться к лучшей команде в качестве Data Engineer! Обязанности: Создание пайплайнов для обработки данных начиная от шага получения данных из сторонних систем и заканчивая построением витрин данных; Ручная или автоматическая проверка правильности миграции; Создание DAG для запуска отчётов по расписанию; Добавление метрик и алертов на актуальность исходных данных; Требования: Опыт работы в роли Data Engineer от 2 лет; Spark - понимание архитектуры Apache Spark, опыт по анализу и оптимизации обработки данных на Spark от 1 года; Scala - знание на уровне написания пайплайнов Spark (либо желание перейти на Scala с Python); AirFlow - опыт в использовании от 1 года; Python - знание на уровне написания DAG по имеющемуся примеру; Hadoop, Hive - опыт от 1 года; SQL - на уровне чтения и понимания кода Hive; Linux и Bash - на уровне пользователя; Готовность общаться с бизнесом и отвечать end-to-end за задачу; Будет плюсом:Опыт работы с Grafana, VictoriaMetrics или аналогамиОпыт работы с потоковой обработкой данныхЗнакомство с инструментом NiFiХороший опыт с CI (используется Gitlab CI)Опыт работы с окружением разработчика (Jira, Confluence) Готовы предложить: Трудоустройство в аккредитованную ИТ-компанию. Возможность работать дистанционно на территории РФ. Сплоченную команду профессионалов, в которой можно не только успешно реализовывать проекты, но и перенимать опыт и развиваться. Обучение, участие в интересных проектах и расширение профессиональной экспертизы: мы участвуем в конференциях, митапах, публикуемся на Хабр и т.д. Конструктивную и открытую рабочую атмосферу. Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках. Корпоративные скидки на фитнес, обучение, путешествия и т.п. Служебную сотовую связь.
Похожие вакансии