Инженер данных / Data Engineer

Привет!

Мы – E-Promo Group , группа компаний с 20-летним опытом. Объединяем пять брендов, работающих на стыке digital-маркетинга, креатива, IT и рекламных технологий.

Нас уже 600+ человек по всей России и за её пределами. Офисы — в Москве, Санкт-Петербурге, Нижнем Новгороде и за рубежом.

Среди наших клиентов — АШАН, ПИК, САМОЛЕТ, МТС, Билайн, СИБУР, Данон, Синергетик, СДЭК.Шоппинг, ВсеИнструменты, Локситан, Hoff и другие сильные бренды.

Задачей Инженера данных будет построить надёжную и масштабируемую платформу, которая превратит разрозненные данные из рекламных систем и внутренних сервисов в понятные и полезные инструменты для бизнеса. Мы ищем специалиста, который умеет выстраивать data-процессы с нуля, заботится о качестве и доступности данных и поможет аналитикам уверенно использовать их для принятия решений.

Что будет в твоей зоне ответственности:

• Развитие платформы данных: участие в проектировании и развитии платформы данных на базе Yandex Cloud, S3, PostgreSQL, ClickHouse, Airflow и dbt , настройка и оптимизация компонентов платформы, автоматизация подключения новых клиентов и рекламных кабинетов; обеспечение идемпотентности процессов, изоляции данных клиентов и разграничения прав доступа; настройка мониторинга, уведомлений, резервного копирования и восстановления; контроль производительности и использования ресурсов.

• Интеграции и обработка данных: разработка ETL/ELT-процессов для загрузки данных из Yandex Direct, Yandex Metrica, рекламных кабинетов, Битрикс24, 1С и других источников; настройка DAG в Airflow, расписаний, зависимостей, повторных запусков, логирования и восстановления после ошибок; организация хранения исходных данных в S3 Raw , преобразования в Parquet и повторной обработки.

• Моделирование и витрины данных: разработка моделей и витрин в dbt и ClickHouse для рекламной отчётности, сквозной аналитики и других бизнес-задач; участие в определении требований к данным, составу показателей, частоте обновления и правилам расчёта совместно…