Описание
Мы находимся в поисках Ведущего Инженера по данным (Data Engineer). Вам предстоит развиваться направление отчетности продукта CVM B2B.
Задачи
•Создавать и оптимизировать пайплайны для сбора и обработки данных
•Контролировать качество данных
•Проектировать схемы для хранения данных
•Автоматизировать построения витрин данных
•Оптимизировать запросы
•Подготавливать техническую документацию
•Разрабатывать и оптимизировать витрины данных
•Проводить интеграцию различных источников данных в DataLake
•Создавать процессы репликаций в различные СУБД
•Оптимизировать и поддерживать существующие ETL-процессы
•Настраивать DQ-мониторинги и алертинги
•Участвовать в Code Review
Требования
•Опыт работы от 5 лет в качестве Data Инженера
•Опыт работы в продуктовой команде от года
•Продвинутые навыки работы с SQL
•Уверенное владение Python и библиотеками для работы с данными и построения ETL процессов
•Знание ClickHouse, onETL, Airflow, Spark
•Умение работать с большими массивами данных (Hadoop, Hive, NiFi, GreenPlum)
•Владение Git
Будет плюсом: опыт работы с доставкой данных (Kafka, Flink)
Условия
•Собственная платформа MTS Ocean для получения ИТ-ресурсов — деплой, мониторинг, observability не будут проблемой, можно сосредоточиться на фичах
•Профессиональные гильдии инженеров по направлениям для поддержки и обмена опытом
•Внутренняя площадка TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации
•Участие во внешних IT-конференциях (HighLoad++, DevOps Conf, Joker, AHA!, Матемаркетинг и другие); собственная конференция True Tech Day и регулярные митапы
•Полезные курсы и вебинары в корпоративном университете и электронные библиотеки
•Медицинская страховка с 1 месяца со 100% покрытием расходов, включая стоматологию, страхование жизни и здоровья в поездках за рубеж; возможность застраховать родственников с корпоративной скидкой
•Единая подписка МТС Premium — KION light в онлайн-кинотеатре KION, сервис МТС Music, 30 дней бесплатного пользования подпиской OZON Premium
•Скидки и предложения от партнеров на фитнес, занятия английским и прочее
•Отпуск 28 календарных дней + 3 дополнительных дня за ненормированный рабочий день
•Гибридный и удаленный формат
