Computer Vision Engineer

Милти Тех – это инновационные решения для автоматизации торговли и общепита. Мы разрабатываем умные станции самообслуживания, роботизированные точки продаж и роботов для доставки и ритейла.

У нас сейчас в работе 2 проекта, первый из которых - outdoor робот-доставщик на колесно-шагающей платформе, и для того, чтобы он успешно доставил продукты, мы должны:

• Детектировать движущиеся (люди, машины, самокаты) и стационарные препятствия в 3D на LiDAR'e, чтобы ни в кого не врезаться;

• Детектировать поверхность и препятствия в 3D по стереокамере, чтобы походка была плавной, мы не спотыкались и когда-нибудь научились пользоваться лестницами.

• Детектировать и Сегментировать поток на камере, чтобы соблюдать ПДД и не пытаться выбежать с тротуара на красный свет;

• Реализовать алгоритмы Sensor Fusion и Tracking, чтобы все это связать вместе.

Второй проект это indoor робот-манипулятор . Его задача быть продавцом на островках МИЛТИ, для этого он должен уметь:

• Детектировать продукты в 3D по стереокамерам, в том числе генерируя их mesh, чтобы точно хватать коробки с едой;

• Строить карту прилавка и строить по ней Occupancy Grid, чтобы не задеть ничего лишнего;

• Детектировать конкретный продукт (чтение названия, QR-кода и т.д.), чтобы не взять не перепутать товары;

• Решать задачи Треккинга.

Общее для обоих роботов это:

• Интеграция сенсоров и их обработки в систему робота;

• Интеграция алгоритмов компьютерного зрения с системами управления роботом (включая взаимодействие с ROS);

• Тестирование и отладка моделей на реальных данных (включая полевые испытания).

Требования:

• Твердая база знаний в области Computer Science, прикладной математики, робототехники или смежных направлений;

• Опыт работы с OpenCV, PyTorch (плюсом будет PCL/Open3D);

• Знание методов детектирования объектов и трекинга;

• Умение работать с нейросетевыми моделями (обучение, fine-tuning, развертывание);

• Опыт работы с Python, знание C++ будет плюсом;

• Понимание работы камер, LiDAR'ов…