Описание
Команда разрабатывает аналитическое хранилище данных Ozon.
Задачи
•Разрабатывать и развивать ETL-системы для обеспечения данными предметных областей: продаж, учёта и логистики
•Анализировать данные и проектировать структуры данных под аналитические потребности бизнес-подразделений
•Оптимизировать и мониторить пайплайны обработки данных, повышая их производительность и стабильность
•Проектировать и реализовывать масштабируемые хранилища данных на базе HP Vertica, Trino, ClickHouse, PostgreSQL и Hadoop
Требования
•Самостоятельность в решении задач и опыт работы ключевым разработчиком на крупном проекте
•Опыт проектирования архитектуры хранения данных и связанных ETL-процессов
•Умение работать с техническими требованиями, аргументированно предлагать изменения и находить оптимальные решения
•Навыки проектирования и реализации ETL-процессов, обязательное знание Airflow
•Отличное знание SQL и системное мышление
•Опыт разработки хранилищ данных с использованием одной из колоночных СУБД: Vertica, Greenplum, Exadata или Teradata
•Опыт программирования на Python, в том числе для разработки решений по автогенерации ETL-задач и реализации логических алгоритмов
•Навыки работы с Bash и Docker
Будет плюсом:
•Опыт работы со Spark, несколькими ETL-инструментами и их использования в горизонтально масштабируемых системах обработки данных
•Знания в CI/CD, frontend- или backend-разработке, разработке интеграционных потоков
•Желание участвовать в управлении проектами и доводить функции до production
•Желание развиваться в наставничестве и помогать другим участникам команды
Условия
Условий в вакансии нет
