О роли
Эта роль находится в самом центре нашей платформы обработки данных в реальном времени, предоставляя командам возможность создавать, развертывать и масштабировать продукты данных, которые влияют на ключевые бизнес-решения и опыт клиентов.
Вы будете проектировать, разрабатывать и эксплуатировать основные возможности платформы, которые обеспечивают работу потоковых конвейеров данных, событийно-ориентированных приложений и продуктов данных с самообслуживанием. Работая на стыке программной инженерии и инженерии данных, вы создадите масштабируемые фреймворки, инструменты и опыт для разработчиков, которые позволят нашим командам быстро и уверенно предоставлять надежные решения.
Небольшой обзор того, чем вы будете заниматься:
•Проектировать и создавать масштабируемые, повторно используемые фреймворки и сервисы для сбора, трансформации и обработки данных.
•Разрабатывать и поддерживать основные возможности платформы, такие как оркестрация, проверка качества данных и инструменты управления схемами.
•Развивать архитектуру платформы, внедряя новые технологии, которые улучшают масштабируемость, надежность и экономическую эффективность.
•Сотрудничать с инженерами Data DevOps для обеспечения автоматизации, наблюдаемости и развертывания функций платформы через CI/CD.
•Выступать ключевым участником в формировании дорожной карты платформы, определяя и приоритизируя функции, которые приносят наибольшую пользу пользователям.
Что мы ищем
Обязательные требования:
•Высшее образование в области компьютерных наук, инженерии или эквивалентное.
•Минимум 3 года практического опыта в создании и эксплуатации платформ данных в реальном времени или событийно-ориентированных платформ и потоковых приложений.
•Прочные основы программной инженерии, опыт работы с языками программирования, такими как Python, Scala или Java.
•Опыт создания повторно используемых фреймворков, библиотек или внутренних инструментов.
•Глубокие знания SQL и паттернов интеграции данных. Опыт работы с современными облачными базами данных, такими как Snowflake или Redshift, будет преимуществом.
•Обязательный опыт работы с технологиями потоковой передачи данных, такими как Kafka.
•Сильный опыт создания распределенных рабочих нагрузок обработки данных с использованием Apache Spark (PySpark и/или Scala).
•Практический опыт проектирования и эксплуатации событийно-ориентированных архитектур на AWS, включая сервисы MSK, Kinesis Data Streams, EKS, EMR, Lambda и EventBridge.
•Опыт работы с NoSQL базами данных, такими как HBase, Cassandra и DynamoDB.
•Отличные навыки устного и письменного общения на английском языке.
Желательные навыки:
•Знакомство с инструментами отчетности в реальном времени, такими как Grafana или Datadog.
•Знание концепций моделирования данных, таких как Inmon, Kimball и Data Vault.
•Знание AWS сервисов, таких как Glue, Lambda, Step Functions и S3.
•Опыт оркестрации конвейеров данных с использованием инструментов, таких как Airflow.
•Опыт создания или управления API и микросервисами.
•Знакомство со скриптингом инфраструктуры, таким как Terraform и практиками CI/CD.
Что мы предлагаем
•Пособие на фитнес и оздоровление
•Корпоративный мобильный телефон для личного использования с 100 ГБ
•Ежегодная компенсация девальвации форинта
•Гибридный режим работы: 3 дня в офисе & 2 дня из дома
•Частная медицинская страховка
•Возможности карьерного роста
•Возможности технического и софт-скилл обучения
•Завтрак, фрукты и обед
•Командные мероприятия
