Обязанности:
Наш Департамент аналитических решений (ДАР) погружен во все современные направления в области работы с данными: внедрение BI-систем и систем аналитической отчетности; проектирование хранилищ и витрин данных; разработка в области продвинутой аналитики и больших данных; применение прикладных продуктов с использованием Machine Learning; внедрение решений в области управлениям данными (Data Governance, Data Quality); разработка методологии и стратегии работы с данными. С нами ты будешь работать над самыми крупными проектами, изменяющими весь технологический ландшафт наших заказчиков - на рынке единицы проектов подобного уровня. Мы всеми силами стараемся сочетать сложные многоуровневые архитектуры и высокую экспертизу всех участников с дружественным форматом построения команды. И это отлично получается! О проекте: перед нами стоит задача трансформировать аналитический ландшафт у нашего заказчика (банковская сфера), а именно объединить 4 отдельно функционирующих хранилища данных в Единую платформу данных на базе новых технологий (Arenadata DB и Arenadata Hadoop). У нас есть несколько стримов, которые взяли на себя различные задачи в этом направлении. Одна из команд занимается репликацией данных из внешних источников в Data Lake, стек: Spark, Scala, Python, Airflow как оркестратор. Мы наращиваем команду и находимся в поиске Hadoop/Big Data Разработчика. Что нужно делать: Разработка хранимых процедур, агрегатов, ETL процессов в экосистеме Hadoop. Разработка комплексных систем интеграции витрин данных Hadoop с использованием Scala + Spark + AirFlow. Согласование требований и подходов к реализации витрин. Участие в разработке архитектурных и технических стандартов. Чего ждем: Опыт работы в роли разработчика на стеке Hadoop от 2-х лет. Опыт разработки приложений с использованием инструментария экосистемы Hadoop (Spark SQL, Kafka, Hive, Hue и т.д.) от 2-х лет. Опыт коммерческой разработки на Scala от 1 года. Также будет здорово, если есть: Опыт участия в проектах построения систем класс Big Data/Data Lake. Знания типовых ETL инструментов (Informatica PC /Apache Nifi etc). Знание банковской специфики и продуктов среднего и малого бизнеса. Что можем предложить: Официальное оформление в штат компании. Заработная плата обсуждается по итогам тех. собеседования. Знаем рынок, готовы обсуждать индивидуально. Гибкое начало рабочего дня, возможность посещения офиса для коллег из Москвы, Санкт-Петербурга и Ярославля. Полная удалёнка для коллег из остальных городов. Постоянный профессиональный и личный рост, самостоятельность в работе. Как одно из направлений развития мы предлагаем рост от разработчика до ведущего разработчика, далее тим-лид /архитектор; Открытая корпоративная культура. Минимум бюрократии и отчётов, а совещания только по необходимости и с чёткой программой. Корпоративный университет, наставничество и развитие. Полис ДМС, корпоративные тарифы на фитнес и занятия английским на ведущих платформах. Приходи к нам в команду, будем вместе создавать крутые и полезные вещи!Похожие вакансии