Обязанности:
В Arenadata стартовал новый проект в области управления большими данными в облаках. Нам нужен Software Architect, специализирующегося на построении cloud-native сервисов на основе Spark и Hadoop. Мы ищем архитектора, который займется проектированием и разработкой платформы для построения Lakehouse, с использованием cutting-edge технологий. Мы ждем, что вы: Знаете принципы, паттерны и практики проектирования программных систем, умеете применять их на практике; Владеете глубокими знаниями технологического стека хранения и обработки данных Datalake\Lakehouse на базе: Hadoop\Spark, S3, Iceberg\Delta\Hudi, Airfllow\Oozie\Dagster, Trino\Impala, Hue, JupiterHub, Knox, Ranger; Понимаете cloud-native подход и инфраструктурные сервисы k8s, S3; Знаете фреймворки проектирования архитектуры (например, TOGAF, Archimate и т.п.); Знаете этапы жизненного цикла программного обеспечения (ПО), этапы управления проектами разработки ПО. Будет плюсом: Имеете опыт разработки PaaS-сервисов и опыт работы с облачными провайдерами; Понимаете концепции ACID-транзакций в Lakehouse; Понимаете принципы контроля доступа и безопасности данных; Имеете опыт подготовки документации вида docs-as-code.Похожие вакансии