Инженер сопровождения

SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI. SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных. Стек технологий: Linux (RHEL), Hadoop (Hive, YARN, Oozie) RH IDM IPA (LDAP, IDM, CA, DNS, HBAC, SUDO), PostgreSQL + Patroni, Apache Ozone, Kafka, HAProxy, NGinx, Grafana + Prometheus, Ansible, Jenkins, Vault (hashicorp), Git, Bash, Python. Задачи установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов автоматизация рутинных операций для повышения производительности и надежности систем (самостоятельно и с привлечением смежных команд, выставление ТЗ на контрагентов) анализ и оперативное устранение нештатных ситуаций, отказов приложений, а также исследование корневых причин их возникновения поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку создание эксплуатационной документации для сопровождаемых систем организация работ, взаимодействие со смежными командами, исправления выявленных недостатков. Требования глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux написание различных SQL запросов, понимание что такое DML, DDL, DCL, TCL, знание принципов работы реляционных БД понимание работы стека TCP/IP опыт эксплуатации CI/CD систем (Jenkins/Github/TeamCity/etc) и с системами мониторинга (Prometheus, Zabbix) понимание технологий интеграции между системами (форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ) опыт…