Data / ML Engineer (RAG & OpenMetadata) в DataGate

Обязанности:

• Развитие RAG-пайплайнов AI-ассистента: промпты, evaluation, бенчмарки.

• Разработка коннекторов OpenMetadata (Oracle, DWH/BI) и интеграция с AI через API (поиск, lineage, контекст).

• Автоматизация DQ-проверок метаданных, синхронизация глоссария.

• Мониторинг, логирование, разбор инцидентов и поддержка решения в проде.

• Написание тех. документации (Runbook) и консультация команд.

Требования:

• Опыт 2–4 года в Backend / Data / ML Engineering (DWH/BI).

• Уверенный Python (REST API, async) и SQL (Oracle или аналоги).

• Понимание RAG, эмбеддингов, векторных БД и оценке качества LLM.

• Опыт с OpenMetadata (API, Ingestion) или DataHub/Collibra (либо готовность быстро освоить).

• Понимание ETL/ELT, Data Lineage и опыт эксплуатации сервисов (CI/CD, мониторинг).

Будет плюсом:

• LangChain / LlamaIndex, векторные БД (Qdrant, Milvus, pgvector и др.).

• Опыт создания корпоративных AI-ботов и знание Data Governance.

• Docker / Kubernetes.