Инженер данных (Data Engineer)

Группа компаний NESCO / JOIA - 29 лет на рынке, крупный дистрибьютор и импортер качественных вин и крепкого алкоголя со всего мира c головным офисом в Санкт-Петербурге, 8 филиалами по России и сетью современных винотек приглашает в команду Инженер данных. Обязанности: Создание и поддержка единого DWH:Построение и обслуживание хранилища данных, обеспечивающего интеграцию данных из разных систем и баз данных (например, 1С, внешние API). Автоматизация ETL/ELT процессов:Разработка автоматизированных процессов для сбора, трансформации и нормализации данных с различных источников в DWH. Оптимизация процессов для минимизации временных затрат и ошибок. Контроль качества данных:Внедрение системы контроля качества данных, включая разработку средств мониторинга, проверки целостности данных, выявления ошибок и информирования ответственных лиц. Интеграция с API и локальными базами данных:Извлечение и интеграция данных по API и из локальных систем, таких как базы данных 1С, для дальнейшей обработки и использования в аналитике. Реализация политики безопасности данных:Обеспечение безопасности данных, включая разработку и внедрение механизмов контроля доступа и реализацию политики безопасности. Подготовка данных для машинного обучения:Поддержка проектов машинного обучения, обеспечивая доступность качественных и подготовленных данных для разработки и обучения моделей. Требования: Владение Python (аналитический стек: Pandas, NumPy, и др.) и SQL (Clickhouse, MySQL, PostgreSQL) для написания запросов и обработки данных. Опыт работы с ETL:Практический опыт проектирования, разработки и оптимизации ETL-процессов, интеграции данных из множества источников в единое хранилище. Разработка и поддержка DWH:Опыт создания и поддержки хранилищ данных для аналитики и отчетности. Работа с системами BI:Умение работать с системами бизнес-аналитики (например, Power BI, Tableau) для визуализации данных и создания отчетов. Аналитическое мышление:Способность к логическому мышлению, анализу данных и выделению ключевых параметров. Умение находить связи и зависимости между параметрами. Организация и структурирование данных:Навыки работы с большими массивами данных, их структурирования и подготовки для различных целей, включая аналитическую отчетность и машинное обучение. Условия: Официальное оформление согласно ТК РФ, "белая" заработная плата без задержек; График работы 5/2 с 10:00 до 19:00 в нашем комфортабельном и стильном офисе в районе м. Ладожская; Возможность профессионального и карьерного развития; Активная корпоративная жизнь и подарки сотрудникам; Скидки на продукцию компании; Наш корпоративный спорт - волейбол, мы еженедельно играем в него, и с радостью примем Вас в нашу команду!