Локация
Москва. Формат работы: офисный, дистанционный или комбинированный.
Компания
VK развивает платформу VK Реклама, объединяющую социальные сети и сервисы России и СНГ с общим охватом более 140 млн человек.
Что делать
•Разрабатывать и сопровождать ETL/ELT-пайплайны на YQL в YTsaurus и ClickHouse.
•Участвовать в миграции таблиц и отчётности с legacy-кластера ClickHouse TRG-1 на YTsaurus и управляемый ClickHouse.
•Поддерживать DAG'и в Airflow.
•Настраивать DQ-проверки, мониторинг свежести данных и разбирать инциденты и аномалии.
•Поддерживать отчётность в Horizon BI, Superset и DataLens, взаимодействовать с аналитиками.
•Участвовать в дежурствах в онколле с наставничеством на старте.
Требования
•Уверенное знание SQL и опыт работы с ClickHouse или другой колоночной/аналитической СУБД.
•Опыт разработки ETL-пайплайнов и работы с Airflow или аналогичными оркестраторами.
•Python на уровне написания рабочих скриптов автоматизации.
•Базовое понимание DWH: слои, моделирование и backfill.
•Знание Git и умение находить первопричины расхождений в данных.
Хорошо, если есть
•Знание YTsaurus и YQL.
•Опыт миграции данных между кластерами.
•Опыт в AdTech: показы, клики, биллинг, ORD/ABC.
Культура и преимущества
•Возможность выбрать офисный, дистанционный или комбинированный формат работы.
•Работа над платформой VK Реклама и её хранилищем данных.
•Наставничество на старте дежурств в онколле.
