Альфа-Банк
Ведущий инженер по эксплуатации Data Lake / DevOps
Что JobRadar наблюдает сейчас
Балл строится только на фактах из источников: свежести подтверждения, возрасте записи и происхождении вакансии. Это не гарантия найма и не оценка работодателя.
Описание вакансии
Сопровождение Big Data Platform (BDP) — внутренней платформы данных банка, используемой дата-инженерами и аналитиками для сбора, хранения и обработки больших объёмов данных из различных источников.
Платформа обеспечивает работу с данными для построения аналитической и BI-отчётности, дашбордов и внутренних сервисов. В её основе — архитектура Data Lake / Lakehouse и технологии S3 Object Storage, Kubernetes, Apache Spark, Airflow, Flink и Kafka.
Команда отвечает за стабильность и доступность инфраструктуры платформы, производительность хранилищ и устранение возникающих инцидентов. Один из ключевых компонентов — высоконагруженное S3-хранилище, обрабатывающее сотни терабайт данных ежедневно.
Чем предстоит заниматься:
- Сопровождение и эксплуатация внутренней Big Data Platform (BDP)
- Обеспечение стабильной работы компонентов Data Lake / Lakehouse
- Администрирование и поддержка высоконагруженной инфраструктуры S3 / Object Storage
- Сопровождение Kubernetes-платформы и развёрнутых в ней компонентов обработки и хранения данных
- Эксплуатация и администрирование Apache Spark, Airflow, Flink, Kafka, Apache Iceberg
- Мониторинг состояния платформы, анализ метрик и логов, контроль доступности и производительности сервисов
- Диагностика и устранение инцидентов, связанных с производительностью и отказоустойчивостью инфраструктуры
- Анализ и оптимизация CPU, RAM, сетевых ресурсов, дисковой подсистемы, задержек и пропускной способности
- Проведение RCA, подготовка postmortem и реализация мероприятий по повышению надёжности платформы
- Автоматизация эксплуатационных процессов и рутинных операций
- Взаимодействие с командами Data Engineering и инфраструктуры по вопросам эксплуатации и развития платформы
Наши пожелания к кандидатам:
- Экспертный опыт администрирования Linux
- Опыт сопровождения высоконагруженных распределённых систем
- Глубокое понимание S3 / Object Storage и архитектуры распределённых хранилищ
- Практический опыт эксплуатации…
Здесь показан очищенный фрагмент описания из источника. Полные условия и актуальность вакансии проверьте на странице работодателя.