Системный аналитик (Flink)

Мы создаем и развиваем корпоративный движок потоковой обработки данных на основе Apache Flink, который используется разработчиками банка для построения приложений реального времени: фрод-мониторинг, скоринг, обогащение транзакций, расчеты. Вы будете работать в платформенной команде, которая отвечает за фреймворк и платформенные возможности Flink.

Платформа находится в фазе активного развития: в рамках стратегического проекта мы снижаем сквозную задержку поставки данных с часов до секунд, развиваем stateful-обработку на внешних state backends, строим self-service управление жизненным циклом приложений и готовим платформу к сценариям реального времени для AI-агентов. Аналитик в этой команде — ключевая роль на стыке архитектуры, разработки и потребителей: от качества проработки требований напрямую зависит скорость и надежность развития платформы.

Обязанности:

• анализ, проработка ТЗ и приемка реализации механизмов stateful-обработки с использованием внешних state backends (S3-совместимое объектное хранилище, HBase, перспективно — Fluss) для сценариев соединения с большими справочниками и хранения состояния приложений

• проектирование решений для повышения отказоустойчивости и управляемости приложений: savepoints, автоскейлинг, восстановление после сбоев

• разработка требований к интеграции Flink-приложений с корпоративными системами: аутентификация, секрет-менеджеры, логирование (ELK), метрики (Prometheus/Grafana)

• проработка требований к системе мониторинга состояния Flink-кластеров и джобов: метрики JVM, backpressure, checkpoint durations, lag

• анализ и проектирование процесса управления жизненным циклом приложений (деплой, апгрейд, остановка) через корпоративный портал управления сервисами

• проектирование интеграции Flink JobManager / REST API с порталом управления

• выявление и формализация потребностей внутренних команд-разработчиков

• Создание подробной технической документации, чек-листов и best practices для команд-потребителей

• Тестирование…