Аналитик DWH (офис)

ОДИН ИЗ ЛУЧШИХ РАБОТОДАТЕЛЕЙ РОССИИ

Мы – Neoflex. Аккредитованная IT компания. За 20 лет работы мы создали 12+ готовых решений для бизнеса, так же занимаемся заказной разработкой программного обеспечения.

Приветствуем на странице нашей компании и благодарим за интерес к вакансии. Будем рады оказаться полезны друг другу.

Сейчас мы расширяем команду, занимающуюся проектом по миграции данных из 87 источников на единую платформу. Команда входит в Центр компетенций BDS - одно из сильнейших подразделений нашей Компании, экспертов в области работы с большими данными, построения DWH и использующих в работе современный стек BigData: Greenplum, Hadoop, NiFi, Hive, Spark/Scala, PostgreSQL, Informatica, Kafka, Apache Airflow, Apache Griffin.

Проект связан с развитием Единой Прикладной Корпоративной Аналитической Платформы (ЕПКАП) в блоке B2C. Мы работаем в соответствии с новой архитектурной концепцией Банка, активно мигрируем витрины с реплик на новый Базовый слой, разрабатываем агрегаты для feature store (питает ML-модели) и решаем нестандартные задачи с большими данными.

Стек технологий:

Hadoop (HDFS, Hive, Spark / SparkSQL, YARN), SQL, Kafka, HUE, CTL (внутренний фреймворк), Jenkins, Jira, BitBucket, Confluence, Power Designer

Что нужно делать:

• Взаимодействие с бизнес-заказчиком, анализ, уточнение, согласование требований бизнеса

• Поиск источников данных, проверка данных

• Разработкой моделей данных витрин

• Согласование с архитекторами заказчика и презентация заказчику

• Разработка прототипов ETL до передачи в разработку

• Написание и выполнение тестовых сценариев, поддержка сверок с эталонными данными

• Создание проектной документации (требования, S2T, модель данных, описание логики трансформации)

• Аd-hoc запросы (проверка гипотез, валидации и сверки данных, подготовка эталонов)

Что мы хотели бы видеть:

Обязательно:

• Уверенное знание SQL,понимание нормализации, опыт разработки витрин

• Базовые знания построения хранилищ, витрин, моделей данных

• …