Обязанности:
Каждый день миллионы людей пользуются поиском Яндекса, Картами и Навигатором, посещают сайты партнёров из Рекламной сети Яндекса. На всех этих площадках размещается реклама наших бизнес-клиентов. Мы ищем инженера данных, который поможет обеспечивать аналитиков данных надёжными и качественными данными. Вам предстоит создавать по разработанной бизнес-логике бесперебойные процессы для подготовки витрин данных, которые позволят коллегам быстро собирать отчёты на основе данных, а бизнесу принимать стратегические решения. Какие задачи вас ждут Взаимодействие с коллегамиВы будете общаться с коллегами внутри команды и заказчиками для понимания бизнес-процессов и основных сущностей. Работа с даннымиВам предстоит проектировать и разрабатывать процессы обработки и хранения данных, поддерживать качество и полноту данных, готовить регулярные и ad-hoc отчёты. Мы ждём, что вы Работали с Git Уверенно программируете на Python, понимаете и используете ООП Уверенно владеете SQL (join, агрегации, оконные функции) Строили ETL/ELT-процессы Понимаете принципы и подходы построения хранилищ данных Будет плюсом, если вы Работали с Apache Hadoop и Apache Spark Использовали Airflow, Luigi или другой оркестратор Создавали хранилища данных по модели Data Vault или Anchor Model Занимались рефакторингом, ревью кода Понимаете CI/CD Работали с ClickHouse, PostgreSQL, Greenplum, BigQuery и другими БД Знакомы с Docker Работали с брокерами сообщений RabbitMQ, KafkaПохожие вакансии