Чем предстоит заниматься
— Разрабатывать и поддерживать ETL/ELT-процессы полного цикла;
— Строить и оптимизировать хранилище данных и витрины;
— Следить за стабильностью и производительностью data-пайплайнов;
— Участвовать в проектировании data-моделей и архитектуры;
— Внедрять проверки качества данных и мониторинг;
— Документировать решения и улучшать процессы разработки.
Мы ждём
— Опыт работы на позиции Data Engineer от 2 лет;
— Хорошее знание SQL, включая оптимизацию сложных и ресурсоёмких запросов, работа с оконными функциями;
— Опыт работы с ClickHouse, понимание особенностей колоночных БД;
— Опыт работы с Airflow: построение и сопровождение DAG-ов, анализ и устранение ошибок;
— Знание Python для data-задач: обработка данных, разработка коннекторов и утилит, написание тестов;
— Опыт разработки ETL/ELT-процессов и работы с большими объёмами данных;
— Опыт обеспечения качества данных: логирование, мониторинг, проверки, алерты, соблюдение SLA;
— Опыт работы с Git, участие в code review, понимание CI/CD и Merge/Pull Requests;
— Опыт работы с Docker.
Будет плюсом
— Опыт работы с Sql Server, Firebird;
— Опыт работы со стриминговой обработкой данных;
— Знание подходов к моделированию данных Kimball / Data Vault;
— Опыт работы с GitLab CI;
— Использование LLM в своей работе.
Условия
— Только гибридный график или офис (удалённого формата нет);
— Уровень ЗП обсуждается с успешным кандидатом;
— Классные ежемесячные бонусы от нас: билеты в кино, посещение боулинга/бильярда, терм, колеса обозрения и детских парков!
