Описание
Мы ищем опытного Senior PostgreSQL / Data Engineer для присоединения к команде, строящей высокопроизводительную корпоративную платформу данных для финансовых рынков / FX. Это отличная возможность для тех, кто любит работать с большими объёмами данных, сложными средами PostgreSQL и обработкой в режиме, близком к реальному времени. Платформа обрабатывает около 40 миллионов сообщений в день и предоставляет актуальные рыночные данные с интервалом обновления до одной секунды.
Задачи
•Участие в проектировании, разработке и оптимизации платформы данных, отвечающей за:
•Обработку данных по 46 валютным парам
•Обработку около 40 миллионов сообщений в день
•Обработку данных в режиме, близком к реальному времени
•Управление крупномасштабным хранением данных с хранением историю данных 2 года
•Интеграцию платформы с системами обмена сообщениями, такими как RabbitMQ
•Предоставление командам доступа к часто обновляемым данным, с обновлениями каждую 1 секунду
•Обеспечение высокой доступности, масштабируемости и производительности
•Проектирование решений, способных поддерживать большие объёмы данных в требовательной финансовой среде
Требования
•Сильный коммерческий опыт работы с PostgreSQL
•Очень хорошее понимание архитектуры PostgreSQL
•Практический опыт партиционирования таблиц
•Сильные знания индексирования баз данных и оптимизации запросов
•Опыт работы с индексами B-Tree, Hash, GIN, GiST и/или BRIN
•Опыт построения или поддержки ETL-процессов
•Опыт работы с крупномасштабными / Big Data средами
•Хорошее знание Linux
•Опыт работы с критичными к производительности средами баз данных
•Свободный польский и английский языки
Будет плюсом
•Python
•Kafka или RabbitMQ
•Apache Airflow
•CI/CD
•Опыт в банковской сфере, финансовых услугах или FX-домене
•Опыт обработки данных в реальном времени или близком к реальному времени
Условия
•Система "кафетерий", позволяющая сотрудникам персонализировать льготы, выбирая из множества опций
•Щедрые бонусы за рекомендацию специалистов — до 6000 PLN
•Дополнительные возможности получения дохода за инициирование партнёрств с новыми клиентами
•Постоянное сопровождение от выделенного Team Manager для каждого сотрудника
•Индивидуальное техническое наставничество от назначенного технического лидера, в зависимости от опыта и потребностей проекта
•Выделенный бюджет на тимбилдинг для онлайн и офлайн командных мероприятий
•Возможность участия в благотворительных инициативах и местных спортивных программах
•Поддерживающая и инклюзивная культура с акцентом на разнообразие и взаимное уважение
