Datanomica
Data Engineer
Что JobRadar наблюдает сейчас
Балл строится только на фактах из источников: свежести подтверждения, возрасте записи и происхождении вакансии. Это не гарантия найма и не оценка работодателя.
Описание вакансии
Мы ООО «Датаномика», собираем инженерные команды под задачи крупного бизнеса. 6+ лет на рынке, 160+ инженеров в штате, 45+ реализованных проектов в финсекторе, телекоме и ретейле. Развиваем шесть направлений экспертизы: высоконагруженные банковские системы, хранилища данных (DWH), генеративный ИИ, комплаенс-системы, кибербезопасность и импортозамещение софта. Аккредитованная ИТ-компания.
Сейчас у нас открыта вакансия Data-инженера в команду крупного российского Банка.
Что входит в задачи:
- Разработка и поддержка ядра репликации:
- Проектирование и реализация высоконагруженных пайплайнов потоковой передачи данных из ERP-системы в КХД.
- Разработка механизмов гарантированной доставки ( at-least-once , exactly-once semantics ) и обработки сбоев без потери целостности финансовых данных.
- Оптимизация производительности потоков Kafka и Spark Streaming (управление партиционированием, сжатием, батчингом).
- Работа с витринами данных:
- Разработка ETL/ELT-процессов трансформации модели данных Банка.
- Написание сложных SQL-запросов, оконных функций и хранимых процедур для агрегации банковских метрик.
- Поддержка актуальности витрин данных, оптимизация их переформирования при изменении источников
- Миграция данных (Data Migration):
- Участие в проектах вывода из эксплуатации легаси-систем (включая исторические АБС).
- Разработка утилит-перекладчиков для извлечения, очистки, обогащения и загрузки исторических массивов данных в новую модель с сохранением ссылочной целостности.
- Качество данных и мониторинг:
- Внедрение автоматических проверок качества данных ( Data Quality checks ): профилирование, поиск дублей, проверка консистентности контрольных сумм.
- Настройка мониторинга задержек репликации (lag) и алертинга через Prometheus/Grafana или аналоги.
- Взаимодействие: Работа по методологии Agile (Scrum/Kanban). Плотное взаимодействие с архитекторами DWH, администраторами БД PostgreSQL, владельцами продуктов (Product Owners) и аналитиками.
- AI-native …
Здесь показан очищенный фрагмент описания из источника. Полные условия и актуальность вакансии проверьте на странице работодателя.