TechLead

Мы — центр компетенций по работе с данными в одном из ведущих банков страны. Наш контур — это тысячи критических ETL-процессов, обеспечивающих принятие решений на уровне топ-менеджмента и бесперебойную работу розничных сервисов.

Сейчас мы строим платформу индустриализации ETL — это «фабрика по производству пайплайнов», где Core на Scala/Spark, умный CI/CD и прозрачный UI объединены в единый Self-Service продукт.

Мы ищем TechLead, который возьмет на себя архитектурную целостность этого сервиса, сможет вывести команду инструментов на новый уровень надежности и станет связующим звеном между инфраструктурой и командами-потребителями данных.

Обязанности

• спроектировать ядро платформы: построить универсальный ETL-фреймворк на Scala/Spark, полностью абстрагировав бизнес-логику от инфраструктурного кода

• настроить промышленный CI/CD: внедрить автоматический деплой пайплайнов через Git (Dev → QA → Prod) с авто-тестированием, линтингом и бесшовной подгрузкой секретов из Vault

• управлять технологическим стеком: принимать стратегические решения по выбору целевого технологического стека и лидировать процесс перехода на него, внедрение AI

• возглавить команду инженеров: лидировать 3 стрима разработки (UI, CI/CD, Core ETL), выстроить жесткие стандарты Code Review

Требования

• наличие высшего технического образования

• опыт управления командой 8-12 инженеров (Data + DevOps + UI)

• уверенное владение SQL, Scala, Java, Python, Groovy, Bash, JavaScript

• опыт работы с базами данных: Apache Spark, Apache Flink, Apache Iceberg, HDFS, YARN, Kubernetes, S3-совместимые хранилища, ClickHouse, PostgreSQL

• экспертный уровень Jenkins Pipeline as Code (Groovy) с организацией Shared Libraries, опыт настройки многостадийных пайплайнов

• опыт построения отказоустойчивых и высоконагруженных ETL-платформ, понимание микросервисной архитектуры

• базовое знание фреймворка React, проектирование асинхронных систем (опыт с Celery, Redis)

• экспертиза в AI & Инновациях…