Разработчик говорящих аватаров реального времени (синтез речи, синхронизация губ, видеопоток)

ATLAXIS — цифровая платформа о здоровье. Нам нужны говорящие аватары врачей: человек задаёт вопрос, а цифровой врач отвечает ему голосом и видео в реальном времени — с живой мимикой и губами, которые двигаются точно под речь. Ищем разработчика или небольшую команду, которые соберут это сначала быстро на готовом сервисе, а затем — на наших серверах.

О проекте

• Сервис хранит анализы и историю здоровья человека и отвечает на вопросы по клиническим рекомендациям со ссылками на источники.

• Аватаров будет 20–25: врачи разных специальностей и внешности, в едином стиле. Лица сгенерированы, реальные люди не используются; мы прямо сообщаем, что это не люди.

• Есть разработчик основной системы, сервер в России, веб-кабинет и мобильное приложение на Flutter.

СХЕМА БУДЕТ ОТПРАВЛЕНА ПОНРАВИВШИМСЯ КАНДИДАТАМ

Схема выше — наше текущее видение, а не догма. Если вы знаете решение лучше — дешевле на большом числе пользователей, с меньшей задержкой или проще в поддержке, — предложите его. Мы сравниваем варианты по пяти критериям:

• цена в месяц при 4 000, 45 000 и 120 000 минут разговоров;

• задержка до первого кадра и естественность речи на русском;

• сколько пользователей одновременно выдержит без «лагов»;

• где обрабатываются данные — в России или за рубежом;

• сроки и стоимость разработки и поддержки.

Что предстоит сделать

• Пилот этапа 1: один аватар, синтез голоса на нашем сервере, связка с Synthesia, показ в веб-кабинете. Замер задержки и качества.

• Подобрать модель синтеза русской речи для своего сервера: эмоции, скорость, требования к железу, лицензия на коммерческое использование.

• Прототип этапа 2 на одном аватаре: библиотека роликов + синхронизация губ + склейка эмоциональных сценариев.

• Расчёт серверов и стоимости для обеих схем; план масштабирования до 20–25 аватаров.

• Встраивание в веб-кабинет и мобильное приложение (Flutter) вместе с нашим разработчиком.

Требования

• Опыт с потоковым видео и звуком в реальном времени: WebRTC, LiveKit или…