Описание
Разработка и поддержка витрин данных в Hadoop (HDFS, Iceberg, Hive), ETL — Spark, CTL — Oozie, CI/CD — Jenkins + BitBucket.
Задачи
•Разработка DWH/DataLake/LakeHouse
•Построение поставки данных в Batch
•Оптимизация sparkовых джоб
•Разработка и валидация архитектуры данных
Требования
•Отличное знание SQL (join, CTE, оконные функции, фреймы и др.)
•Опыт работы с Hadoop, Spark, Iceberg
•Опыт работы с оркестраторами (например, Airflow) и CI/CD
•Практическое знание Python (можно Scala) на уровне разработки ETL
•Практический опыт разработки промышленных ETL потоков
Условия
•Офисный формат работы (Кутузовская)
•Сменный график, предполагает ночные дежурства
•Годовой бонус и ежегодный пересмотр зарплаты
•Расширенный ДМС с первого дня и льготное страхование для семьи
•Корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
•Льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм, скидки от партнеров и сервисов группы компаний
