СА
СалютДевайсы
Data Engineer
СИГНАЛ JOBRADAR68/100Нормальный сигнал актуальности
ПАСПОРТ ВАКАНСИИ
Что JobRadar наблюдает сейчас
Балл строится только на фактах из источников: свежести подтверждения, возрасте записи и происхождении вакансии. Это не гарантия найма и не оценка работодателя.
Последнее подтверждение26 мин. назад
Впервые замечена6 дн. назад
Активные источники1 источник
ПроисхождениеПубличный источник
Описание вакансии
Чем предстоит заниматься?
- Определять и развивать целевую архитектуру платформы данных и ключевых доменных моделей;
- Проектировать и реализовывать критичные пайплайны и хранилища, обеспечивая надёжность, производительность и масштабируемость;
- Вводить и поддерживать стандарты качества данных, схем, версионирования, мониторинга и алёртинга;
- Проводить архитектурные ревью, дизайн-сессии, помогать команде в декомпозиции и решении сложных задач;
- Оптимизировать существующие решения: хранение, запросы, пайплайны, снижать стоимость и повышать SLA;
- Проводить capacity planning и нагрузочное тестирование платформы, определять узкие места и планировать масштабирование вычислительных, сетевых и storage-ресурсов;
- Проектировать отказоустойчивость и disaster recovery платформы: репликацию, резервное копирование, восстановление, RPO/RTO и сценарии отказа отдельных компонентов и кластеров.
Мы ожидаем, что вы:
- Имеете высокий уровень владения Python, SQL, Airflow, dbt;
- Имеете опыт построения систем с HA/DR: отказоустойчивость, disaster recovery, backup/restore, RPO/RTO, multi-AZ/кластерные конфигурации;
- Имеете глубокое знание ClickHouse и его архитектуры, а так же методов оптимизации хранения/скорости доступа к данным: шардирование, репликация, Distributed-таблицы, ClickHouse Keeper, MergeTree-семейство, партиционирование, TTL, materialized views, projections, работа с S3, tiered storage, ORDER BY/primary key, индексы, JOIN, агрегации и т.п.;
- Имеете глубокое понимание архитектуры распределённых систем: CAP, репликация, консистентность, отказоустойчивость, идемпотентность;
- Имеете опыт построения высоконагруженных ingestion-пайплайнов, включая SLA на каждом этапе: ingestion → storage → transformation → serving → BI/ML. Kafka/очереди сообщений, batch и streaming ingestion, consumer groups, backpressure, retries, deduplication, ordering, schema evolution;
- Имеете опыт построения data platform / lakehouse / DWH: raw/bronze → silver → gold, медальонная…
Здесь показан очищенный фрагмент описания из источника. Полные условия и актуальность вакансии проверьте на странице работодателя.
ИсточникHeadHunter / Data Scientist / RU