Data Engineer

Ваши главные задачи:

• Участвовать в разработке отчетной системы;

• Разрабатывать и поддерживать batch ETL-процессы (Python, SQL, Airflow);

• Разрабатывать и поддерживать обработку потоков данных (Python, RabbitMQ);

• Дорабатывать и развивать хранилище данных, строить витрины данных;

• Интегрировать новые источники данных в DWH;

• Реализовывать проверки качества данных DQ;

• Внедрять новые инструменты по работе с данными в компании;

• В ходе работы выстраивать процессы коммуникации с заказчиками;

Нас интересует:

• Хорошое знание SQL - оконные функции, сложные join'ы и подзапросы, опыт оптимизации больших SQL запросов;

• Понимание принципов работы реляционных и колоночных СУБД, опыт проектирования DWH моделирование данных, разбиение по слоям;

• Хорошее знание Python (навыки работы с Pandas будут плюсом), опыт построения data pipeline’ов при помощи Airflow;

• Владение инструментами - Git, Docker, навыки работы с NoSQL СУБД;

• Знание технологий DBT, Debezium, Greenplum, Spark, Data Lake, k8s, PowerBI, Apache NiFi.

Мы предлагаем:

• Работу в крупнейшей финансовой группе страны с устойчивыми возможностями профессионального и карьерного роста;

• Годовой бонус и премию ко Дню Независимости;

• ДМС после прохождения испытательного срока;

• 26 календарных дней отпуска + дополнительные дни при важных жизненных событиях;

• Медицинский check-up после 1 года работы;

• Льготные условия на корпоративный паркинг;

• Открытую корпоративную культуру: спортивные турниры, занятия йогой, корпоративные мероприятия;

• Профессиональное развитие: тренинги, обучение и индивидуальный план развития;

• Участие в новых проектах группы Halyk и возможность реализовывать собственные инициативы;

• Формат работы: график 5/2, 09:00–18:00.