DataOps engineer в команду Holocron

Holocron — команда, которая отвечает за инфраструктуру данных в 2ГИС. Мы строим и поддерживаем системы, через которые проходят события от боевых сервисов до аналитических витрин, обеспечиваем надёжную доставку данных, их хранение, обработку и доступ для всех, кто с ними работает.

Сейчас мы развиваем корпоративную дата‐платформу нового поколения. Это не просто перенос пайплайнов — это переосмысление архитектуры, техстека и подходов. Мы отказываемся от легаси, сохраняем лучшее (например, Apache Spark) и закладываем фундамент, на котором будут работать десятки инженерных команд. Внутри этой трансформации запускаем Ceph‐кластер с высокими требованиями к SLA — на нём будет держаться значительная часть платформы, и нам нужен человек, который вместе с нами сделает это надёжно.

Какие задачи предстоит делать?

• Поддерживать и развивать инфраструктуру дата‐платформы: HDFS, Spark, ClickHouse, Airflow и др.

• Запускать и эксплуатировать Ceph‐кластер с высокими требованиями к SLA.

• Участвовать в миграции на Lakehouse‐стек: S3/Ceph, Iceberg, Trino/StarRocks, Alluxio.

• Сопровождать Kubernetes‐инфраструктуру команды, помогать разработчикам с нетривиальными случаями (Helm‐чарты, деплой и базовый мониторинг команда пишет сама).

• Развивать мониторинг, алертинг и процессы разбора инцидентов на критичных компонентах платформы.

• Взаимодействовать с NOC по сетевым вопросам.

Почему это интересно?

• Ты участвуешь в создании дата‐платформы с нуля — от архитектуры до продакшена.

• Влияешь на технологический курс всей компании.

• Работаешь с современным стеком: Ceph, Spark 3+, Kafka, S3, ClickHouse, Iceberg, Trino/StarRocks, Flink.

• Получаешь опыт эксплуатации Ceph и Lakehouse‐стека в проде с высокой нагрузкой и строгими SLA.

• Решаешь реальные технические вызовы: масштабируемость, отказоустойчивость, миграции без даунтайма.

• Команда самостоятельная и инженерно зрелая — ты занимаешься специализированными вещами, а не рутиной за разработчиков.

Чего ожидаем?

• Опыт…