Описание
Apex Bank — современный банк, который сочетает надежность, инновационные технологии и высокий уровень сервиса. Мы постоянно развиваемся, совершенствуем наши продукты и расширяем команду профессионалов. В рамках развития Data Office мы ищем Data Engineer (Инженера данных), который будет участвовать в создании корпоративного хранилища данных (DWH), разработке ETL/ELT-процессов и подготовке витрин данных для автоматизации регуляторной отчётности Центрального банка Республики Узбекистан.
Задачи
•Разрабатывать и поддерживать процессы загрузки данных из АБС и других источников, включая обработку больших объёмов данных и полные выгрузки.
•Реализовывать трансформации данных на слоях Staging, Core и Data Marts с использованием SQL, PL/SQL/PL/pgSQL и Python.
•Разрабатывать и поддерживать витрины данных для регуляторной отчётности Центрального банка и подготовки отчётов в Metabase.
•Настраивать оркестрацию, расписание и мониторинг процессов загрузки данных с использованием Apache Airflow или аналогичных инструментов.
•Автоматизировать проверки качества данных: полноты, корректности, согласованности и соответствия данным в исходных системах.
•Оптимизировать производительность запросов и процессов загрузки, оперативно выявлять и устранять технические сбои.
•Документировать разработанные решения, вести версионирование кода с использованием Git и участвовать в командном Code Review.
Требования
•Имеет высшее техническое образование.
•Обладает опытом работы в Data Engineering, DWH или ETL-разработке не менее 3 лет.
•Уверенно владеет SQL, включая оконные функции, CTE, индексы и методы оптимизации запросов.
•Имеет практический опыт разработки процедур и пакетов на PL/SQL или PL/pgSQL.
•Владеет Python, включая pandas, и умеет разрабатывать скрипты для обработки и проверки данных.
•Имеет опыт работы хотя бы с одним инструментом ETL/ELT и оркестрации: Airflow, Informatica, SSIS, NiFi или аналогичными решениями.
•Понимает принципы инкрементальной и полной загрузки данных, а также механизм Slowly Changing Dimensions (SCD).
•Владеет основами Linux и Bash, умеет работать с Git.
•Владеет русским языком на уровне, достаточном для работы с технической документацией и взаимодействия с командой.
Будет плюсом:
•Опыт работы с банковскими данными: счета, кредиты, депозиты, балансы и бухгалтерские проводки
•Практический опыт извлечения данных непосредственно из АБС
•Опыт работы с Greenplum, Arenadata или другими MPP-платформами
•Знание Kafka и технологий CDC, включая Debezium или GoldenGate
•Знакомство с Docker и CI/CD
•Опыт использования dbt, Great Expectations или аналогичных инструментов контроля качества данных
Условия
•Работу в современном и динамично развивающемся банке.
•Официальное трудоустройство.
•Конкурентоспособную и своевременную заработную плату.
•Комфортный офис и профессиональную команду.
•Участие в создании корпоративного DWH и развитии современной инфраструктуры данных банка.
•Возможность работать с большими объёмами данных и современными технологиями.
•Поддержку руководства, обучение и профессиональное развитие.
•Возможности для карьерного роста и реализации технических инициатив.
•Корпоративную культуру, основанную на взаимном уважении, доверии и стремлении к совершенству.