Сбер

Data engineer in GenAI

Коротко

Data Engineer для разработки платформы на базе GenAI, автоматизирующей создание и управление маркетинговыми кампаниями через мультиагентные системы. Задачи включают построение и оптимизацию хранилищ данных и витрин, ETL-процессы на Hadoop/GreenPlum, работу со стеком Big Data (Spark, Hive/Impala, Kafka). Требуется от 3 лет опыта Data Engineer/MLE, продвинутый SQL, Python/Scala, pySpark; плюсом — опыт с AI-агентами и моделями GigaChat/Kandinsky. Офисная работа в Москве.

Описание
Мы разрабатываем инновационную платформу на основе генеративного искусственного интеллекта (GenAI), предназначенную для автоматизации создания и управления маркетинговыми кампаниями. Основной целью нашего продукта является генерация персонализированных коммуникаций в автономном режиме, где мультиагентные системы самостоятельно анализируют данные аудитории, разрабатывают стратегии, создают контент и оптимизируют результаты в реальном времени.
Задачи
•Разработка и деплой мультиагентных систем, осуществляющих обработку и генерацию коммуникаций в режиме реального времени
•Проработка архитектуры хранилища данных, а также его интеграция с внешними системами
•Проектирование и разработка аналитических витрин данных для целей аналитики и моделирования
•Загрузка, очистка и трансформация больших объемов данных из различных источников в рабочую область (платформы GreenPlum и Hadoop)
•Мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин
•Контроль качества загружаемых данных, разработка автоматизированных инструментов для оценки качества данных
•Участие в анализе требований, оценке трудоёмкости задач и планировании релиза совместно с командой
Требования
•Опыт работы в качестве Data Engineer / MLE от 3 лет
•Знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов)
•Отличное знание Python/Scala и библиотеки pySpark
•Знание основных понятий и концепций Data Warehousing и Big Data
•Опыт разработки ETL-процессов
•Опыт работы с большими объемами данных, построения хранилищ и витрин данных
•Опыт работы со стеком технологий Big Data (Hadoop, Spark, Hive/Impala, Kafka)
•Понимание принципов DevOps и опыт участия в процессах автоматизации сборки, тестирования и развёртывания
•Ответственное отношение к выполнению задач, желание профессионально расти и развиваться
Будет плюсом:
•Навыки работы с генеративными AI-моделями
•Опыт создания AI-агентов и использования их в работе
•Опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов
•Инструментальное владение AI для анализа, генерации и автоматизации
Условия
•Офисный формат работы, адрес офиса Кутузовский проспект 32 к 1
•Ежегодный пересмотр зарплаты, квартальная и годовая премия
•Корпоративный спортзал и зоны отдыха
•Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
•Программа адаптации и помощь руководителя на старте
•Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
•Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
•Подписка Прайм с возможностью совместного использования на трёх близких
•Вознаграждение за рекомендацию друзей в команду Сбера

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте