Инженер/ аналитик DWH

Мы ООО «Датаномика», собираем инженерные команды под задачи крупного бизнеса. 6+ лет на рынке, 160+ инженеров в штате, 45+ реализованных проектов в финсекторе, телекоме и ретейле. Развиваем шесть направлений экспертизы: высоконагруженные банковские системы, хранилища данных (DWH), генеративный ИИ, комплаенс-системы, кибербезопасность и импортозамещение софта. Аккредитованная ИТ-компания.

Сейчас у нас открыта вакансия Инженера / аналитика DWH на проект в крупный Российский банк.

Технологический стек: Python, Apache Spark, Hadoop, S3, Apache Airflow, Greenplum. Знание Apache Iceberg, Apache Kafka будет плюсом

Чем предстоит заниматься:

• Анализ и оценка требований бизнеса (Управление данными / Data Governance);

• Анализ существующих и выстраивание новых бизнес‐процессов;

• Создание прототипов витрин данных и доработка существующих;

• Разработка ETL‐процессов интеграционных задач, тестирование;

• Проектирование и создание модулей стандартных приложений для типовых ETL‐процессов;

• Создание и внедрение корпоративных стандартов разработки;

• Поддержка разработанных решений в качестве третьей линии, ad‐hoc запросы;

• Проектирование решений, разработка прототипов;

• Тестирование разработанного функционала;

• Написание проектной документации (FSD, ER‐диаграмм, логической модели объектов);

• Создание и согласование архитектурных Vision/OTAP;

• Разработка тест‐кейсов и проведение внутреннего и интеграционного тестирования со смежными системами‐потребителями данных витрины, подготовка синтетических данных для тестирования;

• Заключение дата‐контрактов и SLA с системами‐поставщиками данных, заказчиками

Необходимые знания и навыки:

• Языки программирования: SQL, Python

• Технологический стек: Apache Spark, Hadoop/S3/S3-like, Apache Airflow, Parquet/ORC. Знание Apache Iceberg, Apache Kafka будет плюсом

• Навыки работы с: Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON

• Навыки системного анализа, тестирования

• Базовое знание работы с РСУБД…