Описание
ИТ B2C — крупная экосистема Сбера, которая разрабатывает и развивает розничные решения, делая банковские сервисы доступнее, безопаснее и удобнее. Команда занимается разработкой и поддержкой витрин данных на базе Hadoop, подготовкой датасетов для обучения моделей и созданием реплик данных.
Задачи
•Проектировать, разрабатывать и сопровождать витрины данных на базе Hadoop
•Участвовать в разработке ETL-процессов для загрузки данных в витрины
•Поддерживать и мониторить работу витрин данных
•Взаимодействовать с командами разработки, системными аналитиками и аналитиками данных по вопросам сбора, обработки и хранения данных
•Разбирать инциденты качества данных и развивать автоматизированные тесты Data Quality
•Документировать разработанные решения
•Участвовать в разработке базовых и специальных витрин данных в Едином ПКАП B2C
•Готовить датасеты для обучения моделей в FeatureStore B2C
•Разрабатывать витрины данных на Hadoop в ПКАПе команды
•Реализовывать реплики в КАП «Первичные данные»
Требования
•Практический опыт разработки витрин данных и выстраивания ETL-процессов
•Уверенное владение SQL: аналитические функции, подзапросы, хранимые процедуры и функции, оптимизация производительности
•Готовность создавать инструменты для нужд инфраструктуры и разработки
•Опыт работы с Hadoop, включая HDFS, YARN и Hive, а также Spark
•Знание Java или Scala и опыт разработки на этих языках
•Опыт разработки на Python
•Понимание инструментов и технологий Big Data
•Знание принципов построения распределённых систем хранения и обработки данных
•Опыт обработки и миграции больших объёмов данных между различными источниками
•Опыт работы с системами контроля версий Git
•Навыки работы с генеративными AI-моделями
•Опыт использования GigaChat, Kandinsky и аналогов в продуктах
•Будет плюсом: опыт работы с Kafka, CI/CD-инструментами Jenkins и GitLab CI, базовые знания Docker и других технологий контейнеризации, опыт работы с системами Unix и bash
Условия
•Офис рядом с метро «Кутузовская»
•Возможность выбрать удобный график
•Ежегодный пересмотр зарплаты
•Годовая премия
•Корпоративный спортзал и зоны отдыха
•Более 400 образовательных программ СберУниверситета
•Программа адаптации и помощь руководителя на старте
•Расширенный ДМС
•Льготное страхование для семьи
•Корпоративная пенсионная программа
•Дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
•Подписка Прайм с возможностью совместного использования на трёх близких
•Вознаграждение за рекомендацию друзей в команду Сбера
