Описание
Вакансия связана с работой с большими объёмами данных: подготовкой данных для аналитики и ML-моделей.
Задачи
•Разрабатывать и поддерживать витрины данных на Spark с Scala API
•Оптимизировать и ускорять существующие Spark-задачи, устранять перекосы и снижение производительности
•Подготавливать и обогащать данные для аналитики и ML-моделей
•Строить метрики, проводить разовый анализ и готовить отчётность
Требования
•Уверенно владеть SQL и иметь практический опыт анализа больших объёмов данных
•Уметь решать аналитические задачи: сложные JOIN, агрегации, оконные функции
•Понимать принципы оптимизации запросов и уметь читать и анализировать explain plan
•Самостоятельно вести задачи, задавать уточняющие вопросы и работать без пошаговых инструкций
•Уметь уточнять задачи и работать с неоднозначными требованиями
•Проверять корректность своей работы и качество данных
•Проявлять инициативу и предлагать решения проблем в коде или пайплайне
•Оставлять понятные комментарии, описывать изменения и объяснять результаты простыми словами
•Нести ответственность за результат
Будет плюсом
•Опыт работы с Apache Spark преимущественно через Scala API/Dataframe API
•Участие в проектах построения DWH
•Опыт работы с LLM-решениями при разработке витрин данных
•Опыт подготовки данных для ML
•Навыки работы с Git
•Критическое мышление
Условия
•Работа в офисе 5/2
•Ежегодный пересмотр зарплаты и годовая премия
•Корпоративный спортзал и зоны отдыха
•Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
•Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
•Дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
•Подписка Прайм с возможностью совместного использования на троих близких
•Вознаграждение за рекомендацию друзей в команду Сбера