Data Engineer в AI-команду

Domclick.ru - единственный в России продукт, обеспечивающий полный цикл операций с недвижимостью. Доступен на всех популярных платформах (Web, iOS, Android). Решаем любые вопросы с недвижимостью, делая сложное простым, с заботой о каждом клиенте. Мы ищем единомышленников, чтобы вместе помогать людям исполнять мечту о собственном жилье.

Проект:

Наша цель - сделать самый точный инструмент предсказания рыночный цены и ликвидности на рынке недвижимости. Мы строим модели, которые позволяют оценивать рыночную стоимость разных типов объектов недвижимости (квартиры на вторичном рынке, новостройки, загородная недвижимость и т.п.), в разных сегментах и срезах.

Мы строим Feature Store для DS, где храним и регулярно пересчитываем тысячи фичей по недвижимости, клиентам и состоянию рынка. Сейчас мы переходим от офлайн-батча к потоковой архитектуре реального времени — и ищем инженера, который поведёт этот переход за собой.

Чем предстоит заниматься:

• развивать и поддерживать Feature Store;

• решать задачи Data Governance и Data Quality (OpenMetaData);

• проектировать и реализовывать пайплайны обработки данных для работы ML-моделей;

• участвовать в проектировании интеграций Feature Store с ML-сервисами и командами;

• участвовать во внедрении новых инфраструктурных решений для работы с big data.

От вас мы ожидаем:

• отличное знание Python;

• опыт оркестрации данных: dbt/airflow/beam;

• опыт работы с Greenplum, PostgreSQL, ClickHouse;

• понимание архитектуры данных (SCD).

Будет плюсом:

• опыт работы с k8s;

• опыт работы с Event-Driven системами и CDC;

• опыт работы с Kafka;

• опыт с S3/Apache Iceberg.

Мы предлагаем:

• работу в аккредитованной IT компании;

• конкурентную заработную плату;

• полис ДМС с первого месяца работы;

• современную технику для работы;

• корпоративный университет, онлайн-курсы для повышения квалификации, конференции, митапы;

• фитнес-зал в здании офиса;

• льготную программу ипотеки для сотрудников;

• комфортный офис класса А в 5…