КО
Компания БКС
Дата инженер
СИГНАЛ JOBRADAR75/100Нормальный сигнал актуальности
ПАСПОРТ ВАКАНСИИ
Что JobRadar наблюдает сейчас
Балл строится только на фактах из источников: свежести подтверждения, возрасте записи и происхождении вакансии. Это не гарантия найма и не оценка работодателя.
Последнее подтверждение12 мин. назад
Впервые замечена9 ч назад
Активные источники1 источник
ПроисхождениеПубличный источник
Описание вакансии
стрима:
«База знаний» - это внедрение базовой дисциплины управления критическими* данными корпоративного хранилища: как структурированными (таблицы, витрины, отчёты), так и неструктурированными (Confluence, Wiki — знания о данных).
Цель проекта – создание работающей системы управления критическими данными ФГ, обеспечивающей:
- полную идентификацию и описание источников,
- измеримое качество через дата-контракты,
- единую навигацию по данным и знаниям о них,
- дисциплину поддержания актуальности,
- наличие источников в целевом состоянии.
Чем предстоит заниматься:
- Разрабатывать и поддерживать CI/CD-пайплайны для ETL-процессов, проверок качества данных и инфраструктурных компонентов;
- Обеспечивать версионирование ETL-кода, конфигураций, тестов и технической документации;
- Автоматизировать развёртывание, пересборку и восстановление data-пайплайнов при сбоях;
- Настраивать мониторинг, алертинг и централизованное логирование для контроля состояния процессов и качества данных;
- Внедрять автоматизированные проверки схем, целостности и полноты данных на этапах загрузки и обработки;
- Обеспечивать управление секретами, доступами и безопасностью данных и инфраструктуры;
- Поддерживать среды разработки, тестирования и эксплуатации, оптимизировать производительность и использование ресурсов;
- Настраивать резервное копирование и восстановление данных и конфигураций, обеспечивать соблюдение RTO/RPO;
- Участвовать в диагностике и устранении инцидентов, проводить пост-инцидентный анализ;
- Документировать архитектуру, data-пайплайны, процессы деплоя и восстановления.
Наши ожидания:
- Опыт работы Data Engineer от 3 лет;
- Уверенное владение SQL: сложные запросы, анализ планов выполнения, оптимизация; практический опыт с Greenplum и MS SQL;
- Опыт разработки и сопровождения ETL-процессов в Apache Airflow: проектирование DAG, операторы, сенсоры;
- Опыт построения CI/CD для data-пайплайнов: GitLab CI, настройка Runners, Docker, Bash;
- Опыт работы с…
Здесь показан очищенный фрагмент описания из источника. Полные условия и актуальность вакансии проверьте на странице работодателя.
ИсточникHeadHunter / Data Scientist / RU