Senior Data Engineer/Инженер данных

giper.fm - технологическая компания, работающая на пересечении digital-маркетинга, e-commerce, аналитики и рекламных технологий.

Сейчас мы развиваем единый контур данных, который должен связать информацию из клиентских проектов, CRM, рекламных систем, сайтов, брендшопов и внутренних сервисов. Наша цель - перейти от разрозненных выгрузок и отчетов к надежной платформе данных для управленческих решений, автоматизации аналитики и создания новых продуктов.

Для реализации этой задачи мы ищем Data Engineer , который поможет спроектировать и построить технологический фундамент аналитической системы giper.fm.

Что предстоит делать

• Провести аудит существующих источников данных, интеграций и процессов их обработки;

• Участвовать в проектировании целевой архитектуры платформы данных;

• Создавать и развивать ETL/ELT-процессы для сбора данных из CRM, баз данных, API, рекламных платформ, систем веб-аналитики и внешних файлов;

• Настраивать регулярную загрузку, очистку, трансформацию и консолидацию данных;

• Проектировать структуру хранилища и модели данных для аналитических и управленческих задач;

• Совместно с аналитиками формировать витрины данных для отчетности, BI-дашбордов и клиентской аналитики;

• Обеспечивать качество, полноту, актуальность и непротиворечивость данных;

• Настраивать мониторинг пайплайнов, логирование, уведомления об ошибках и контроль SLA;

• Оптимизировать производительность запросов и стоимость хранения и обработки данных;

• Документировать источники, модели данных, правила трансформации и интеграции;

• Участвовать в выборе технологического стека и внешних решений;

• Обеспечивать разграничение доступа и безопасную работу с коммерческими и персональными данными;

• В перспективе - готовить инфраструктуру для предиктивной аналитики, автоматизации и ML-продуктов.

Мы ожидаем

• Уверенное владение SQL и Python;

• Практический опыт создания и поддержки ETL/ELT-пайплайнов;

• Опыт интеграции систем через API, базы данных, файлы и очереди…