Обязанности:
В TechInvest Consulting мы хотим изменить подход к принятию решений в FMCG бизнесе. Сейчас мы разрабатываем инновационный продукт на стыке AI технологий, дизайна и бизнес аналитики, для максимально эффективного управления ассортиментом компании на основе анализа больших данных и построения предиктивных моделей. Мы даем свободу в выборе рабочего времени, места, так как сами это ценим. Сейчас мы ищем Дата-инженера. Внимание: это проектная команда! Чем предстоит заниматься: Построение архитектуры БД Написание ETL потоков для построения витрин Описание потоков в документации Описание SQL запросов к витринам для бэкенда а также - Самостоятельно анализировать требования к потокам данных, разрабатывать и поддерживать системы сбора, хранения и обработки данных - Улучшать процессы работы с данными и обеспечивать их качество Стек:- Spark- Scala- Airflow- Hadoop Наши пожелания Знание передовых принципов построения хранилищ данных. Опыт работы с Hadoop. Отличное знание SQL. Опыт работы с Python на уровне написания API, небольших скриптов и сервисов. Знание Git. Опыт работы с ETL оркестраторами (airflow) Что мы предлагаем: Аккредитованная компания У нас дружелюбная атмосфера и команда профессионалов Возможность работать из любой точки мира Возможность создать действительно интересный проект Гибкий график работы Реализация классного и полезного проекта, которого еще нет на российском рынке