Обязанности:
Вместе с нами ты будешь: Выполнять функциональных обязанностей в рамках программы по созданию целевой платформы данных на базе стека технологий от Arenadata; а так же Postgresql, Oracle, Hadoop, Airflow, Nginx, WildFly, SSAS; Взаимодействовать с техническими-владельцами систем источников с целью уточнения семантики данных, особенностей бизнес-процессов и используемых объектов; Разрабатывать стандарты загрузки, хранения и доступа к данным, архитектурный надзор за реализацией конвейера Данных; Взаимодействовать с командами платформы данных, разрабатывающими конвейер Данных, разработчиками Единой Модели детального слоя, озера данных и Витрин Данных; Согласовывать архитектуру с подразделениями информационной безопасности, корпоративной архитектуры и поддержки; Выявлять риски и недостатки в существующей архитектуре данных; Вести репозитории архитектурных артефактов и другой архитектурной документации; Проектировать способы интеграции Платформы данных с внешними системами; Участвовать в процессах планирования работ, определения ресурсов и оценки трудозатрат, рисков проекта. Участие в тестировании и в приемо-сдаточных испытаниях разработанного функционала. Какие знания и навыки для нас важны: Опыт разработки архитектуры ETL от 2-х лет, для высоконагруженных хранилищ данных; Глубокие знания типовых трансформаций данных в ETL/ELT процессах, подходов к версионированию данных в хранилищах, реализации регламентной загрузки данных с большим инкрементом; Опыт разработки и оптимизации ETL процессов в детальный слой хранилища Банка или Корпоративное Хранилище Данных крупного предприятия финансовой сферы; Наличие опыта создания сложных инфраструктурных решений, проектирования решений, в частности опыт проектирования API, схем данных, архитектурных артефактов; Опыт разработки на одном из следующих ETL инструментов: SAS DI, Informatica PC, ODI как преимущество; Опыт работы с одной из СУБД GreenPlum, PostgreSQL, Oracle, MSSQL; Опыт проектирования приложений на базе трехзвенной архитектуры. Похожие вакансии