Инженер данных

Вам предстоит:

• Разработка и поддержка DAG-ов в Apache Airflow 2.x: Python-операторы, TaskGroup, dynamic task mapping, сенсоры.

• Оркестрация ETL/ELT: ClickHouse, PostgreSQL, 1С/ERP, Excel/CSV/TXT, внешние API.

• Настройка расписаний, retries, таймаутов, алертов по падениям.

• Работа с Connections/Variables: вынос секретов и путей из кода.

• Рефакторинг «монолитных» скриптов в модульные DAG-и с переиспользуемыми функциями.

• Диагностика инцидентов по логам Airflow, ведение базы типовых ошибок.

• Документирование DAG-ов и обучение сотрудников.

Ждем от Вас:

• Опыт работы с Airflow от 1 года (написание своих DAG-ов).

• Уверенный Python 3.10+ и pandas (merge, concat, groupby, обработка дат).

• Продвинутый SQL (JOIN, оконные функции, CTE), опыт с ClickHouse и PostgreSQL.

• Опыт в Linux (bash, systemctl, docker, venv, pip).

• Понимание DWH-слоёв и места DAG-ов в архитектуре.

• Excel на уровне сводных таблиц и сложных формул.

• Опыт с BI-инструментами (Datalens, Tableau, Power BI).

• Навык презентации результатов бизнесу.

• Опыт миграции скриптов в Airflow.

• Опыт с 1С (консоль запросов, выгрузки).

• Настройка алертов (email, Max, Bitrix24).

• Опыт с ИИ-ассистентами (ChatGPT, Codex, GigaChat) и формирование базы промтов.

• Опыт обучения сотрудников.

• Понимание пирамиды метрик.

• Docker/docker-compose, S3/parquet, ClickHouse-словари.

Выбирая нас, ты получаешь:

• ​​Полный соцпакет, как говорится, по всем правилам ТК РФ – все, как положено!

• Работаешь у нас? Готовься к взлету! Мы не просто компания, а настоящий космический корабль, который мчится вперед, оставляя конкурентов далеко позади. Здесь тебе предложат перспективы роста и кучу новых фишек, чтобы стать профи своего дела.

• Команда? Это настоящая банда супергероев! Каждый член нашей команды – это ходячая энциклопедия знаний и опыта. Мы делимся всем, что знаем, всегда готовы прийти на помощь и умеем сосредоточиться на главном.

• Работаем так, будто завтра конец света, но при этом успеваем…