Инженер данных (Data Engineer)

Третье Мнение — разработчик IT-решений для системы здравоохранения. Мы создаём продукты на основе технологий искусственного интеллекта, которые помогают автоматизировать процессы в медицинских организациях, ускорять принятие врачебных решений и повышать качество и безопасность медицинской помощи.

Сейчас мы ищем Инженера данных (Data Engineer) , который будет заниматься развитием и поддержкой инфраструктуры обработки и хранения данных, обеспечивать их качество, доступность и эффективное использование в аналитических и продуктовых задачах компании.

Чем предстоит заниматься:

• Разрабатывать, тестировать и поддерживать ETL/ELT-процессы для сбора, преобразования и загрузки данных из различных источников в корпоративное хранилище

• Проектировать и развивать архитектуру хранилища данных (DWH), оптимизировать схемы данных, выбирать форматы хранения и стратегии партиционирования

• Создавать и поддерживать витрины данных для аналитических и продуктовых команд

• Разрабатывать и поддерживать процессы обработки данных с использованием Apache Airflow

• Оптимизировать производительность SQL-запросов, контролировать использование ресурсов и эффективность хранения данных

• Реализовывать механизмы проверки качества и целостности данных, выявлять и устранять аномалии

• Настраивать мониторинг процессов обработки данных, оповещения о сбоях и механизмы автоматического восстановления

• Внедрять и поддерживать стратегии управления жизненным циклом данных

• Обеспечивать стабильную работу и доступность хранилища и витрин данных

• Поддерживать актуальность используемых библиотек и инструментов обработки данных в средах разработки, тестирования и эксплуатации

• Участвовать в проверке и оптимизации SQL-запросов совместно с аналитиками

• Документировать процессы обработки данных, их источники, преобразования и зависимости

• Взаимодействовать с командами разработки, аналитики и машинного обучения для решения задач, связанных с данными

Будем рады видеть в новом коллеге…