О проекте
Создать технологию real-time AI-аватара.
Человек находится перед камерой и управляет системой в реальном времени, а зритель видит другого цифрового человека — с передачей мимики, движений и речи.
Важно: нам не подходит готовый сервис с каталогом аватаров. Необходимо создать собственный рабочий pipeline на базе современных AI-моделей и open-source технологий.
Задачи
•исследовать и подобрать технологии для real-time face reenactment / face swap / digital human;
•собрать работающий прототип;
•добиться минимальной задержки и стабильной работы в реальном времени;
•настроить передачу мимики, движений и синхронизацию речи;
•организовать вывод через OBS / virtual camera / streaming;
•после запуска технологии сформировать команду и обучить сотрудников работе с системой.
Требования
•уверенный Python;
•PyTorch / Computer Vision;
•опыт работы с GPU / CUDA;
•опыт обработки видео в реальном времени;
•понимание Face Tracking / Face Reenactment / Pose Estimation;
•OpenCV / FFmpeg;
•способность самостоятельно исследовать и внедрять новые AI-технологии.
Будет большим плюсом: опыт с MuseTalk, LiveTalking, LivePortrait, Wav2Lip, MediaPipe, diffusion models и аналогичными технологиями.
Нам важен практический опыт, а не знание конкретного набора инструментов.
Руководство направлением
После создания прототипа специалист возглавит направление:
•разработка и совершенствование технологии;
•создание инструкций;
•обучение сотрудников;
•контроль качества;
•постановка технических задач;
•развитие команды.
Условия
250 000–350 000 ₽ на руки, итоговая сумма обсуждается по опыту.
•Ульяновск — приоритетно;
•возможна удалённая работа / переезд;
•высокая степень самостоятельности;
•возможность возглавить новое AI-направление.
В отклике
Напишите, с какими AI / Computer Vision / video / face swap / digital human проектами вы работали.
Если есть GitHub, демо или примеры работ — приложите ссылку.
Дополнительно: кратко опишите, как бы вы построили систему, в которой камера реального человека в реальном времени управляет цифровым человеком.
