Описание
Data Engineering-команда отвечает за инфраструктуру данных: сбор, хранение и обработку игровых и продуктовых метрик. Мы помогаем аналитикам и продуктовым командам работать с данными быстро, стабильно и в нужном объеме.
Задачи
•Разрабатывать и поддерживать DAG'и для Apache Airflow
•Настраивать процессы CDC (Change Data Capture) для передачи продакшн-данных в аналитическое хранилище
•Разрабатывать/оптимизировать витрины данных с использованием SQL для аналитических задач
•Разрабатывать трансформации данных на базе Apache Flink
•Следить за качеством данных с помощью инструментов Data Quality и оптимизировать их обработку
Требования
•Уверенные знания Python, Java
•Глубокое понимание и умение работать с SQL
•Опыт работы с Apache Kafka, Apache Airflow, dbt, Great Expectations, Apache Flink, Apache Trino/Presto, Hive, Docker, MongoDB, PostgreSQL, AWS
Будет плюсом:
•Опыт работы с Apache Spark, Kubernetes, CI/CD, Helm, Terraform
•Навыки программирования на Scala
Условия
•Возможность влиять на продукт и решения внутри команды
•Шанс внести свой вклад в продвижение игр, в которые играют миллионы игроков ежемесячно
•Прямая коммуникация без лишней бюрократии
•Команда, где принято делиться опытом и поддерживать друг друга
•Атмосфера свободы и открытости
•Забота о сотрудниках, которую вы заметите и в личном отношении, и через полезные бенефиты
•Официальное оформление
•Возможность работать из комфортабельных офисов в разных странах или удаленно
•Гибкий подход к формату и месту работы
•Медицинское страхование, чекапы, компенсация сессий с психологом
•Помощь в профессиональном росте: корпоративная библиотека, внутренние курсы, английский от SkyEng, возможность учиться и посещать профильные мероприятия за счет компании
•Вся необходимая техника: ноутбук, программы и лицензии, а также другая нужная техника для работы
•Скидки на фитнес, спортзал в офисах, компенсация участия в спортивных соревнованиях