Data Engineering & Development Lead

Международная IT-компания открывает вакансию Руководителя команды Data Engineering для развития платформы данных и сервисов продукта. Вам предстоит руководить кросс-функциональной командой дата-инженеров, разработчиков и QA, принимать архитектурные решения, обеспечивать надежность data-систем и развивать инженерную экспертизу команды.

Обязанности:

• Развивать архитектуру DWH, потоковую обработку данных и сервисы на основе данных

• Обеспечивать надежность и производительность систем при работе с большими объемами данных

• Внедрять и поддерживать инженерные практики: CI/CD, Code Review, автотестирование и observability

• Руководить кросс-функциональной командой, проводить 1-on-1 и Performance Review, участвовать в найме и развитии сотрудников

• Распределять зоны ответственности и развивать обмен знаниями внутри команды

• Планировать работу команды, оценивать сроки, управлять приоритетами и рисками

• Контролировать выполнение SLA/SLO по доступности и свежести данных

• Анализировать инциденты, проводить Post-Mortem и внедрять системные решения для повышения отказоустойчивости

• Взаимодействовать с продуктовыми аналитиками, BI и Backend-командами, защищать архитектурные решения

Стек технологий:

• ClickHouse, Apache Kafka, MongoDB, Liquibase, Python

• Docker, Kubernetes, GitLab CI, Apache Airflow, Redis, KeyDB, MinIO, FastAPI

• OpenMetadata, Prometheus, OpenTelemetry

Требования:

• Опыт работы в Data Engineering от 5 лет

• Опыт управления командой дата-инженеров или кросс-функциональной командой от 2 лет

• Практический опыт проектирования и эксплуатации высоконагруженных распределенных систем

• Глубокое знание ClickHouse и Kafka и опыт их использования в высоконагруженных системах

• Опыт проектирования DWH, Data Lake и аналитических решений

• Опыт разработки на Python и работы с Big Data-инструментами

• Понимание принципов Data Governance и управления каталогами данных

• Опыт принятия архитектурных решений и взаимодействия с бизнес-заказчиками

•…