Обязанности:
О компании: БизнесМатика - это интегратор digital-решений. Мы занимаемся заказной разработкой веб-сервисов и мобильных приложений для заказчиков из e-commerce, финтеха, а также для производственных и продуктовых ИТ-компаний. С 2012 года мы завершили 200+ проектов различного масштаба. Центральный офис компании расположен в Санкт-Петербурге, второй офис - в Ереване (Армения). Мы входим в ТОП-20 компаний по разработке ПО в авторитетном рейтинге Tagline! Мы в поиске инженера данных Грейд: Senior / Senior+ Опыт: от 5 лет для Senior, от 7 лет для Senior+ Требования: - Опыт в построении и развитии банковских КХД и ETL/ELT-платформ- Техническое лидерство, проведение ревью решений, кода и пайплайнов- Глубокая экспертиза в Greenplum и Spark, включая оптимизацию под большие объемы- Опыт миграций или модернизации DWH-платформ, включая Oracle - Greenplum- Умение формировать инженерные стандарты и наставлять специалистов- Ответственность за целевую архитектуру, технические решения, риски, сроки и качество инженерного контура (для Senior+)- Опыт определения стратегии развития КХД, масштабирования платформы и управления техническим долгом (для Senior+)- Участие в найме, развитии команды и управлении подрядчиками (для Senior+)- Способность формировать стандарты и переиспользуемые фреймворки для команды (для Senior+)- (Будет плюсом) Опыт с Liquibase, Kafka, мониторингом Spark-задач и корпоративными стандартами разработки данных Задачи:- Разрабатывать и сопровождать ETL/ELT-пайплайны, витрины и интеграционные потоки- Реализовывать загрузки, инкрементальные сценарии, контроль качества и обработку ошибок- Оптимизировать SQL-запросы и производительность обработки данных в Greenplum- Использовать Apache Spark, Airflow, GitLab CI/CD, Python и/или Java для разработки и автоматизации- Поддерживать надежность, наблюдаемость, логирование, алертинг и восстановление процессов Условия: - Работа в команде с крутыми специалистами, где каждый готов делиться опытом; - Оформление по договору самозанятости или ИП; - График работы: 5/2; - Гибридный формат работы: очные встречи в офисе 1 раз в неделю для жителей Москвы и МО, 1 раз в 3 месяца для других регионов.Похожие вакансии