Локация
Гибридный формат работы.
Компания
Финтех-направление Yandex развивает экосистему финансовых сервисов для миллионов пользователей и бизнесов, включая платежные, кредитные и банковские продукты.
Что делать
•Проектировать и развивать облачную платформу данных с использованием Yandex Cloud.
•Создавать единую observability-платформу для DWH-таблиц, включая мониторинг сборки, качества данных, зависимостей, datalineage и логирования.
•Оптимизировать поставку данных, реализовывать загрузку снепшотов, инкрементов, CDC и потоковую обработку с минимальной задержкой.
•Создавать изолированные окружения разработки, тестирования и предпрода с автоматизированными проверками.
•Развивать внутренние low-code-фреймворки для загрузки, трансформации и контроля качества данных.
Требования
•От 3–4 лет коммерческой разработки.
•Глубокое понимание архитектуры баз данных, оптимизации запросов, планов выполнения, партиционирования, шардирования и индексов.
•Опыт работы с PostgreSQL, Oracle, MongoDB и Greenplum.
•Практический опыт с CDC и реализацией соответствующих пайплайнов.
•Уверенная работа с S3-совместимыми хранилищами.
•Знание Python, Apache Airflow, Apache Spark, Spark SQL, DataFrame и Trino.
Культура и преимущества
•Гибридный формат работы.
•Работа с высокими нагрузками, большими данными и миллионами транзакций.
•Инженерные задачи в среде с повышенными требованиями к безопасности, надежности и регуляторной отчетности.
