Data engineer

Команда входит в состав Центра финансового оздоровления и занимается обеспечением бизнес-заказчиков данными для принятия управленческих решений. Основные цели — проектирование и разработка витрин данных, обеспечение качества и доступности аналитических данных, оптимизация ETL-процессов.

Обязанности

• поиск и анализ источников данных

• аналитика и проектирование витрин данных под потребности бизнес-заказчиков

• разработка витрин данных на основе Greenplum (PL/pgSQL) и Hadoop (Java/Spark) и вывод их в пром в соответствии с банковским релизным процессом

• подготовка и сборка дистрибутивов, сопровождение по стендам разработки и тестирования

• разработка решений потоковой обработки данных в режиме Near Real Time (NRT) и пакетной (Batch)

• выстраивание и оптимизация производительности ETL-процессов

• оптимизация существующих разработок

• разработка и поддержка сопроводительной документации и спецификаций данных, базы знаний по вопросам работы с данными

• готовность использовать ИИ в ежедневной работе (обучение за счёт компании — есть свои курсы).

Требования

• продвинутый уровень владения SQL: агрегатные, аналитические функции, опыт написания и оптимизации сложных запросов, программирование на PL/pgSQL

• опыт работы дата-аналитиком / дата-инженером от 2-х лет с MPP и реляционными СУБД: Greenplum, PostgreSQL, способность выбирать архитектурные паттерны (дистрибьюция, партицирование, индексы)

• опыт разработки и внедрения корпоративных хранилищ данных (DWH), работы с CI/CD решениями на базе Jenkins и Bitbucket/Git с ИИ (GigaChat, DeepSeek, GPT), создания витрин данных, знание архитектуры Greenplum (мастер, дистрибьюторы, партицирование), Big Data платформ (Hadoop, Spark), практическое применение ИИ-инструментов в работе с данными

• ответственность и внимательность к деталям

• аналитическое мышление, способность структурировать выводы и рекомендации

• проактивность, инициативность, нацеленность на результат

• способность работать самостоятельно и в…