Обязанности:
Мы - Wildberries, один из самых крупных и известных маркетплейсов, который создают более 4-х тысяч IT-специалистов. Мы создаем сервисы для себя - это автоматизация процессов логистики/складов/ПВЗ, эко-система платежных продуктов и многое другое. В связи с расширением отдела ищем талантливого, проактивного и опытного BigData/DWH SRE в команду инфраструктуры. Проект: Строим с нуля аналитическое хранилище компании. Что планируем построить: Кластер Hadoop Vanilla одной из последних версий, компоненты: HDFS, YARN, Hive, Trino, Spark, Airflow, JupyterHub, FreeIPA KDC, Knox, Ranger, Hue, OpenMetadata, Superset.Часть сервисов на железе, часть - в K8S. Интеграция с Keycloak. Чем предстоит заниматься: Принимать участие в проектировании технической архитектуры хранилища. Собирать и пакетировать компоненты кластера. Автоматизировать деплой и конфигурацию компонентов кластера с помощью Ansbile/Helm. Организовать мониторинг и алертинг ключевых метрик кластера. Организовать отказоустойчивость, безопасность и бэкапирование. Решать проблемы низкой производительности, исправлять ошибки в работе кластера. Почему тебе может быть с нами интересно: Строим хранилище практически с нуля. Есть возможность построить на современном стеке, избежать типичных ошибок, проверить свои гипотезы В команде уже есть экспертиза, но не хватает рук. Поможем освоиться и прокачать свои знания в администрирования современного Bigdata/DWH стека. Какие знания и опыт мы от тебя ждем (минимум): От 3 лет опыт в администрировании Linux. От 1 года опыт в администрировании Hadoop. Что будет являться для тебя преимуществом: Навыки работы с K8S, а также опыт по переносу приложений с железа в K8S и выстраивание процессов CI/CD на основе GitLab CI. Большой опыт в траблшутинге сложных распределенных систем. Умение писать на Python. Мы предлагаем: Возможность гибкого начала рабочего дня, 100% удаленный или гибридный формат (есть несколько офисов в Москве). Интересные и амбициозные задачи (работа на проекте с нуля), возможность для горизонтального и вертикального карьерного роста. Оформление по ТК РФ в IT компанию с первого дня. Современный стек, минимум бюрократии. Бонусы компании: ДМС, партнерские программы по обучению и фитнесу, корпоративное питание для сотрудников в офисе.Похожие вакансии