Описание
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ. Мы в поиске Data инженера в Платформу данных департамента Финтех.
Задачи
•Писать и поддерживать ETL на Spark для больших потоков событий из Kafka
•Развивать модель данных (ODS, CDM, витрины) и выгрузки в ClickHouse
•Настраивать мониторинг пайплайнов и сервисов, участвовать в дежурствах
•Разрабатывать ETL-пайплайны (Python, SQL, Spark) и DAG в Airflow
•Развивать модели данных и хранилища (S3/Ceph/MinIO, Hadoop, Greenplum, ClickHouse)
•Разрабатывать прикладные сервисы платформы данных
•Настраивать мониторинг и алертинг сервисов
Требования
•Уверенный Python и SQL
•Опыт со Spark, ClickHouse, Hadoop, Kafka, Greenplum, S3 (Ceph, MinIO)
•Опыт написания DAG для Airflow
•Опыт с Docker и Kubernetes
•Опыт с Linux и Git
•Опыт с Iceberg и Trino
•Опыт с Prometheus, Grafana, VictoriaMetrics
•Опыт построения feature store для ML
•Опыт в финтехе или работе с финансовыми данными
Условия
•Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое
•Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании
•Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.
•Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников
•Скидки и партнерские программы: на обучение, страхование, покупки и многое другое
•Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников
