О компании HumanSignal
Данные из реального мира — это конкурентное преимущество в области ИИ.
HumanSignal — это партнер по человеческим данным для компаний, создающих модели и продукты на базе ИИ. Наши клиенты выпускают лучшие ИИ-продукты быстрее, потому что мы сотрудничаем с их исследователями на всех этапах — от создания данных из реального мира до их аннотирования и доставки.
Мы проектируем и создаем наборы данных с нуля, набираем и управляем экспертами в различных областях, которые оценивают результаты моделей, и запускаем все это через нашу собственную платформу Label Studio — открытый стандарт для разметки и оценки данных, используемый более чем 1 миллионом специалистов по всему миру.
Мы специализируемся на операционно сложных задачах: сбор данных из реального мира, мультимодальные конвейеры и многоэтапные рабочие процессы. Продвинутые команды по машинному обучению и ИИ используют нашу корпоративную платформу для управления собственными фабриками данных, а наша сервисная команда расширяет их возможности там, где внутренние ресурсы исчерпаны.
Если вы хотите заниматься работой, которая существенно влияет на то, как создается следующее поколение ИИ-продуктов, мы будем рады поговорить с вами.
Уровень: Менеджер
Оплата: 110 000 – 140 000 долларов США
Местоположение: Сан-Франциско, Калифорния
О роли
HumanSignal специализируется на операционно сложном, мультимодальном сборе и аннотировании данных — предоставляя наборы данных, необходимые для передовых исследований в области ИИ, которые недоступны на рынках удаленной рабочей силы. Мы ведем проекты от начала до конца: от определения объема и разработки протоколов до окончательной доставки, управляя как локальными, так и распределенными экспертными командами в более чем 50 областях знаний, на 30+ языках и в 75+ странах. Наша работа охватывает RLHF, оценку, red-teaming и создание пользовательских мультимодальных данных, все это поддерживается Label Studio Enterprise и основано на строгих процессах контроля качества, этическом источнике данных и полной безопасности данных. Эта роль находится в операционном ядре этого механизма доставки — отвечая за то, чтобы наши клиенты получали данные высочайшего качества вовремя, каждый раз.
Эта роль подходит не всем. Служба HumanSignal работает на стыке передовых исследований в области ИИ и масштабной доставки человеческих данных — работа быстрая, требовательная и не прощает ошибок. Вы будете полностью отвечать за сложные, ответственные программы по работе с данными, управлять экспертными командами, ориентироваться в меняющихся требованиях клиентов и одновременно контролировать качество и сроки доставки. У вас не будет готового плана действий. Вы будете создавать его, ломать и строить заново, но лучше. Если вы процветаете под давлением, гордитесь операционным совершенством и не сдаётесь, когда проект становится сложным — эта роль для вас.
Что вы будете делать
Ежедневная работа интенсивна по замыслу. Вы будете одновременно управлять несколькими программами, каждая из которых имеет своих участников, стандарты качества и ожидания клиентов. Вам придется принимать трудные решения при неполной информации, требовать ответственности от участников и поставщиков, а также находить творческие решения проблем, не имеющих очевидных ответов. Ожидание простое: отвечать за результат, без оправданий. Лучшие сотрудники здесь растут быстрее, чем где-либо еще в отрасли. Планка высока — и это сделано специально.
•Руководить и управлять командой стратегических руководителей проектов (SPL) одновременно по нескольким ответственным проектам в области данных для ИИ
•Отвечать за результаты доставки по вашим проектам: производительность, качество, соблюдение SLA, эффективность затрат и удовлетворенность клиентов
•Обеспечивать выполнение задач по индивидуальным конвейерам данных и рабочим процессам экспертной разметки, переводя требования исследователей в четкие операционные планы
•Сотрудничать с исследователями лабораторий ИИ и партнерами по закупкам для определения стратегий данных, определения объема программ и разрешения эскалаций
•Внедрять системные улучшения — стандартизировать инструкции, улучшать инструменты и создавать инфраструктуру, которая делает команду быстрее и надежнее в масштабах
•Обучать и развивать SPL; обеспечивать высокое качество опыта AI Trainer и сильное удержание участников
•Сотрудничать с командами продукта и инженерии для развития внутренних инструментов, автоматизации и операционных систем
Требуемые квалификации
•Более 5 лет опыта в операционно интенсивных ролях (маркетплейсы, операции с данными, логистика или аналогичные)
•Более 1 года опыта управления людьми с явным влиянием на производительность команды
•Ориентация на метрики с системным подходом к операциям
•Опыт ответственности за результаты доставки в проектах с несколькими заинтересованными сторонами и высокой скоростью выполнения
•Практический исполнитель, готовый при необходимости погрузиться в выполнение задач
•Обязательное владение использованием больших языковых моделей (LLM) в повседневной работе, включая создание скриптовой логики и работу с большими наборами данных с помощью LLM
Желательные квалификации
•Более 1 года опыта в операциях с данными для ИИ (RLHF, аннотирование, оценка моделей)
•Образование в области STEM или высокая техническая грамотность
•Рабочие знания Python и REACT
•Опыт управления распределенными командами участников в масштабах
•Опыт работы в консалтинге по управлению, инвестиционном банкинге или быстрорастущих стартапах
