Инженер по тестированию

РТЛабс создаёт и развивает масштабные цифровые сервисы Госуслуг — портал, мобильные приложения, социально значимые услуги, системы электронного правительства. Наша команда делает жизнь миллионов пользователей проще и позволяет решать жизненные вопросы в несколько кликов

Наша команда применяет продуктовый подход и ориентируется на пользователей. Мы стараемся быть лидерами изменений на Госуслугах и внедрять новые практики командной работы. Робот Макс — умный помощник на Госуслугах, который понимает с полуслова. Цель — сопроводить, поддержать и помочь пользователю. Стратегия команды — выйти за рамки Госуслуг и отвечать на любой вопрос к государству

Сейчас мы ищем инженера по тестированию, который хочет расти в направлении тестирования ML и AI‐агентов

Что ты будешь делать

• Планировать и сопровождать релизы AI‐агентов и связанных сервисов

• Анализировать требования и технические постановки, оценивать тестовое покрытие

• Проводить ручное функциональное, интеграционное, регрессионное и E2E‐тестирование AI‐агентов и их интеграций

• Тестировать API агентов и вспомогательных сервисов (REST, WebSocket/Socket.io)

• Разбирать логи, локализовать ошибки, взаимодействовать с разработкой и аналитикой для быстрого фикса

• Вести тестовую документацию: чек‐листы, тест‐кейсы, тест‐планы, сценарии E2E (в Jira/TM4Jira)

• Автоматизировать рутинные проверки на Python (pytest + requests), постепенно наращивая долю автотестов готовом фреймворке автотестирования в CI/CD (GitLab CI / GitHub Actions)

• Участвовать в оценке качества ML/LLM‐компонентов: проверка ответов, выявление галлюцинаций, базовые метрики (BLEU/ROUGE, LLM‐as‐judge), регрессионные проверки поведения агентов

Мы ждём, что ты

• Имеешь опыт тестирования 2–4 года: веб‐приложения + API, уверенное ведение тест‐кейсов/чек‐листов, работа в Jira

• Имеешь опыт участия хотя бы в одном проекте с ML/LLM: тестирование качества ответов, галлюцинаций, базовых метрик (BLEU/ROUGE, LLM‐as‐judge) — будет большим плюсом

• Имеешь…