ML/LLM/EVAL разработчик

Обязанности:

• Разработка, проектирование и описание RAG-архитектуры (Retrieval-Augmented Generation)

• Разработка и внедрение решений на базе ML/LLM для поиска, обработки и анализа документов

• Реализация и оптимизация механизмов поиска информации, работы с embeddings и векторными базами данных

• Разработка backend-сервисов на Python, работа с SQL и интеграция языковых моделей в существующую архитектуру программных продуктов

• Разработка систем оценки качества AI-решений (Evaluation): формирование тестовых наборов, измерение точности поиска и ответов, выявление ошибок и проведение сравнительного тестирования моделей и версий системы

• Анализ причин ошибок и оптимизация качества, производительности и стабильности ML/LLM-решени

• Разработка механизмов контроля качества и предотвращения регрессий при изменении моделей, промптов и компонентов RAG-системы.

Требования:

• ML/LLM: практический опыт работы с большими языковыми моделями, RAG-архитектурой, поиском и обработкой документов, embeddings и векторными базами данных

• Разработка: уверенное владение Python и SQL, опыт разработки backend-сервисов, интеграции моделей и работы с существующей архитектурой программных продуктов

• Evaluation: опыт построения систем оценки качества AI, формирования тестовых наборов, измерения точности поиска и генерации ответов, выявления ошибок и сравнительного тестирования моделей

• Оптимизация: опыт повышения точности, производительности и стабильности ML/LLM-решений, анализа причин ошибок и предотвращения регрессий

• Знание английского языка, (опыт кодингf на английском) b1- b2, фокус на письменную речь

Условия:

• Официальное трудоустройство с соблюдением всех требований ТК РФ

• Фиксированная окладная часть +годовой бонус по результатам работы

• График 5/2, пн-чт: c 9.00-18.00, пт: с 9.00 до 16.45 (гибридный формат)

• Офис в шаговой доступности от ст. м Павелецкая/Новокузнецкая/Третьяковская (Озерковская наб.,30)

• Полис Добровольного медицинского страхования со…