Инженер данных (Data Engineer)

продукте

eAkimat 365 — мультитенантная государственная платформа управления бюджетом, которой пользуются акиматы регионов Казахстана. Платформа покрывает планирование, формирование бюджетных запросов, исполнение и аналитику; интегрирована с внешними государственными системами. Данные и инфраструктура размещаются на территории Республики Казахстан.

О роли

Мы развиваем аналитический контур платформы и ищем инженера данных, который возьмёт на себя ответственность за конвейеры данных и согласованность модели между операционным и аналитическим слоями.

Обязанности:

• Проектирование, разработка и сопровождение ETL/ELT-процессов.

• Развитие модели данных аналитического контура и слоя метрик: описания, тесты, прослеживаемость происхождения данных.

• Оптимизация запросов и производительности витрин.

• Контроль качества данных: автоматические проверки, мониторинг пайплайнов, разбор расхождений с источниками.

• Поддержка разграничения доступа к данным на уровне модели.

• Ведение технической документации по схемам и моделям данных в репозитории.

Требования:

• Образование: высшее техническое или IT — желательно. Профильное образование не является обязательным при наличии сильного практического опыта в Data Engineering.

• 3+ года на позиции инженера данных или близкой (ETL-разработчик, BI-инженер с инженерным уклоном).

• Уверенный SQL уровня оптимизации: планы выполнения, индексы, оконные функции, работа с таблицами от десятков миллионов строк.

• PostgreSQL в продуктивной эксплуатации: репликация, партиционирование, миграции схемы.

• Python для разработки пайплайнов — поддерживаемый код с тестами, а не разовые скрипты.

• Опыт оркестрации: Airflow или аналог (Dagster, Prefect).

• Понимание размерного моделирования и практический опыт проектирования витрин данных.

• Git-воркфлоу: ветки, merge request, code review. Работа в GitLab как повседневная практика.

• Будет плюсом

• dbt в продуктиве, включая тесты и документацию моделей.

• Опыт CDC (Debezium…