Инженер данных (ClickHouse / Airflow / Python)

Кадровый центр Министерства здравоохранения Московской области предлагает вакансию инженера данных (ClickHouse / Airflow / Python) в ГБУ МО «МИАЦ».

ГБУ МО «МИАЦ» (Медицинский информационно-аналитический центр) — подведомственная организация Министерства здравоохранения Московской области. Мы обеспечиваем сбор, обработку и анализ медицинских данных, внедряем и сопровождаем региональные информационные системы в сфере здравоохранения.

Кого мы ищем:

Нам нужен инженер данных, который умеет строить и сопровождать витрины и загрузку данных, проверяет каждый результат на данных и готов вести студентов. Отдел переводит работу с ручных выгрузок на региональное аналитическое хранилище медицинских данных (сотни таблиц, крупнейшие — сотни миллионов строк) и ИИ-агента, которым пользуются аналитики министерства и медицинских организаций.

Чем предстоит заниматься:

• Разрабатывать витрины регионального аналитического хранилища медицинских данных на ClickHouse: изучать данные источников (ЕМИАС, скорая помощь, льготное лекарственное обеспечение и др.), собирать витрины, описывать их колонки;

• Разрабатывать и сопровождать загрузку данных в хранилище на Apache Airflow: инкрементальная загрузка из MS SQL Server (Change Tracking) и PostgreSQL, снимки таблиц, контроль свежести данных;

• Переводить регулярные ручные выгрузки отдела (десятки повторяющихся задач) на автоматические расчёты по расписанию со сверкой с результатами прежних скриптов;

• Обеспечивать качество данных: сверять хранилище с источниками по медицинским организациям, проводить аудит слоёв хранилища, выявлять и устранять расхождения;

• Участвовать в развитии ИИ-агента «Оперативная аналитика» (вопрос на русском языке → SQL-запрос к хранилищу → ответ): утверждённые определения показателей, инструменты агента, проверка ответов на реальных вопросах аналитиков;

• Наставлять студентов-стажёров отдела и проводить ревью их кода.

Что мы ждём от вас:

• Высшее техническое или математическое образование (прикладная…