DevOps инженер (DataLake)

В нашем трайбе SberWorks (Сбер) команда DataLake отвечает за хранение и получение данных на базе Hadoop - развитие и сопровождение холодного хранилища.

Сейчас мы запускаем новый сервис в составе Productivity Platform - горячее хранилище для быстрого поиска и retrieval: платформенный полнотекстовый поиск, семантический поиск по эмбеддингам (vector search), формирование контекста для RAG и выдача релевантных фрагментов в AI-ассистентов.

Цель создания платформы Productivity Platform - обеспечить единый и бесшовный путь для команд Банка, сократив производственные затраты благодаря максимальной автоматизации и применению искусственного интеллекта на каждом этапе производственного процесса.

Хранилище данных (DataLake) — "кровь" платформы, и ваша роль в этом проекте будет ключевой!

Ваши задачи:

• разворачивание и сопровождение горячего хранилища с экосистемой ElasticSearch, S3, Kafka, OpenShift, Prometheus

• обеспечение бесперебойной работы Data Lake и всех ее компонентов.

Мы ожидаем:

• знакомство со стеком ELK / OpenSearch: вы должны уметь разворачивать отказоустойчивые кластера ElasticSearch / OpenSearch и понимать как они масштабируются

• опыт работы с Linux-системами и средствами их диагностики (от 2 лет)

• навыки работы с инструментами Infrastructure as Code: Ansible, Helm: автоматизация процессов настройки и управления инфраструктурой — важная часть вашей работы

• опыт работы с оркестраторами Kubernetes (K8S) или OpenShift

• понимание принципов мониторинга на всех уровнях.

Мы предлагаем:

• современный комфортный офис рядом с м. Кутузовская.

• годовой бонус и ежегодный пересмотр зарплаты

• расширенный ДМС с первого дня, страхование жизни, корпоративная пенсионная программа

• льготная ипотека для сотрудников, подписка Прайм с возможностью шеринга (совместного использования) на трёх близких, скидки от партнеров и сервисов группы компаний

• корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях

• офис с видом…