Data Engineer (Data Governance)

Digital Chief — IT-хаб новой ecom-платформы от Альфа-Банка, где мы объединяем экспертизу по построению процессов и технологий вокруг нового продукта на рынке.

Мы строим независимый e-com — единый мультиканальный сервис Альфа-Ecom

Он объединит инструменты для работы на маркетплейсах, полный спектр решений для создания собственного интернет – магазина и управление кросс - канальными продажами в одном пространстве.

Наша ключевая задача — помочь селлерам снизить зависимость от отдельных площадок и выстроить устойчивую стратегию развития бизнеса.

Мы уже запустили e-com в Альфа-Банке и нашими продуктами воспользовались более 4000 селлеров.

Сейчас в нашей команде открыта позиция Data Engineer .

Задачи:

• Проектирование и внедрение систем управления качеством данных (Data Quality Frameworks).

• Поддержка и развитие каталогов данных (data catalog, lineage, схемы, владельцы, описания).

• Архитектура и реализация витрин данных для аналитики, ML и AI-агентов.

• Поддержка и написание пайплайнов ETL/ELT (Airflow / Spark / Kafka / etc.).

• Настройка мониторинга качества данных: completeness, freshness, accuracy, consistency.

• Работа с инструментами автоматической проверки данных (Great Expectations, Soda, dbt tests и др.).

• Взаимодействие с командами DE, аналитики, ML и продуктов для обеспечения доверия к данным.

• Сопровождение инициатив по data privacy, security, compliance (GDPR, SOC2, PII, etc.).

Что мы ожидаем:

• 3+ лет опыта в области Data Engineering, Data Governance, Data Quality или Data Platform.

• Отличное знание SQL, уверенное владение Python.

• Опыт внедрения и поддержки data catalog / data lineage (OpenMetaData).

• Опыт написания ETL на БД Clickhouse.

• Опыт внедрения фреймворков для валидации и контроля качества данных.

• Опыт работы с инструментами: Great Expectations, Deequ, Soda, Monte Carlo, dbt tests.

• Навыки построения документации и стандартов по качеству данных, SLA, ownership моделей.

Будет преимуществом:

• Опыт…