Cantina Labs

Научный сотрудник, генерация видео в реальном времени

Коротко

Научный сотрудник по генерации видео в реальном времени для интерактивных AI-персонажей в Cantina Labs — социальной AI-компании, создающей передовые модели реального времени. Работа включает потоковую генерацию, дообучение, дистилляцию, оптимизацию вывода, разработку данных и оценку моделей. Требуется опыт обучения или дообучения видео- или связанных генеративных моделей, умение быстро осваивать новые методы и хорошее экспериментальное чутьё. Офисный формат работы, полная занятость.

О компании Cantina
Cantina Labs — это социальная AI-компания, разрабатывающая набор передовых моделей в реальном времени, которые расширяют границы выражения, личности и реализма. Мы оживляем персонажей, трансформируя способы, которыми люди рассказывают истории, общаются и творят. Мы создаём и поддерживаем экосистемы. Cantina, наша флагманская социальная AI-платформа, — это только начало.
Если вас вдохновляет потенциал AI формировать человеческое творчество и социальные взаимодействия, присоединяйтесь к нам в создании будущего!
О роли
Мы работаем над генерацией видео в реальном времени для интерактивных персонажей, включая реалистичных людей, стилизованных персонажей и не-человеческие идентичности. Мы хотим, чтобы эти персонажи казались присутствующими: чтобы они говорили, реагировали и выражали себя через лицо, жесты и язык тела.
Это объединяет ряд тесно связанных исследовательских задач. Персонаж должен иметь последовательный внешний вид, выразительные и согласованные движения, а также естественную связь между речью и движением. Модель также должна быстро реагировать и надежно генерировать контент по мере развития взаимодействия. Важны качество, управляемость и эффективность.
Вы будете работать с потоковой генерацией, дообучением, дистилляцией, оптимизацией вывода и данными. Некоторые задачи потребуют нового подхода к обучению; другие сводятся к лучшим примерам, более полезной оценке или пониманию узких мест в реализации. Часть работы — определить, какое вмешательство стоит сделать.
У вас будет значительная свобода предлагать направления, исследовать незнакомые идеи и формировать то, над чем мы будем работать дальше. Мы ищем человека, который ценит эту свободу и может превратить её в последовательность полезных экспериментов.
Чем вы будете заниматься
•Генерация в реальном времени и потоковая генерация. Разработка моделей, поддерживающих отзывчивое взаимодействие при сохранении визуального качества и последовательности во времени. Исследование задержек, непрерывности и изменений поведения модели при длительной генерации.
•Выражение персонажа и движение. Изучение того, как внешний вид, мимика, жесты и движения тела объединяются в цельного персонажа. Улучшение связи между речью и движением для разных идентичностей и визуальных стилей.
•Дообучение и пост-тренировка. Адаптация видео-моделей к новым данным, поведению и возможностям. Исследование целей обучения и методов кондиционирования, а также реализация и оценка перспективных идей.
•Дистилляция и оптимизация вывода. Ускорение и повышение эффективности генерации. Работа с подходами на уровне модели и улучшениями во время выполнения, измерение их влияния на качество, задержку и использование памяти.
•Разработка данных. Проведение значительного времени с реальными обучающими примерами. Выявление пробелов в покрытии и повторяющихся ошибок, улучшение курирования и выборки, разработка данных, помогающих моделям усваивать нужное поведение.
•Оценка. Создание сравнений, делающих прогресс видимым и ошибки понятными. Сочетание количественных измерений с тщательным просмотром сгенерированного видео и опытом взаимодействия с моделью.
•Исследования и сотрудничество. Изучение релевантных работ, воспроизведение и адаптация полезных идей, обмен ранними экспериментами, демонстрациями и результатами. Помощь команде в решении, чему стоит уделить больше времени и вычислительных ресурсов.
Что вы принесёте
•Опыт обучения или дообучения видео- или связанных генеративных моделей.
•Способность быстро осваивать незнакомые методы и превращать идеи в полезные эксперименты.
•Хорошее экспериментальное чутьё, ответственность и чёткое общение.
У вас будет свобода исследовать новые подходы. Мы ожидаем быстрой итерации и раннего обмена результатами.
Компенсация
При определении компенсации будут учитываться множество факторов, включая навыки, опыт, масштаб работы, местоположение и данные о конкурентном рынке труда.
Преимущества для сотрудников в США:
•Конкурентная зарплата и щедрый пакет акций компании
•Медицинская, стоматологическая и офтальмологическая страховка – 99,99% страховых взносов покрывает Cantina
•42 дня оплачиваемого отпуска, включая:
•15 дней оплачиваемого отпуска (PTO)
•10 больничных дней
•15 праздничных дней компании
•2 плавающих праздничных дня
•Щедрый отпуск по уходу за ребёнком и поддержка фертильности
•Пенсионный план 401(k)
•Счёт на расходы на образ жизни – 500 долларов в месяц на ваше усмотрение
•Бесплатный обед и закуски для сотрудников в офисе
•Членство в One Medical и многое другое!

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте