О роли
Эта роль будет способствовать проектированию и разработке нашей платформы для удовлетворения бизнес-потребностей, а также для улучшения наших систем. В этой роли у вас будет возможность проектировать новые каналы передачи данных, поддерживать платформы, размещённые на потоках данных для пакетной и реального времени загрузки и визуализации в реальном времени.
Небольшой обзор того, чем вы будете заниматься
•Поддержка и развитие нашей существующей платформы данных
•Создание процессов для загрузки данных из Kafka, API и баз данных с использованием AWS MSK Connect
•Разработка и поддержка приложений для обработки данных в реальном времени с использованием таких фреймворков, как Spark Structured Streaming и Kafka Streams
•Применение преобразований к потокам данных
•Участие в моделировании данных согласно стандартам, например Inmon, Kimball, Data Vault
•Обеспечение качества данных путём проверки их согласованности и точности
•Отслеживание исследований и разработок новых технологий и методов для улучшения нашей платформы данных
•Обладать исследовательским мышлением для решения проблем — нестандартный подход к устранению неполадок и управлению инцидентами
•Полная ответственность за проекты и задачи, а также умение работать в команде
•Умение хорошо документировать процессы и проводить сессии обмена знаниями
Что мы ищем
Обязательные требования
•Опыт работы с современными облачными базами данных, такими как Snowflake
•Опыт оркестрации каналов передачи данных с использованием Airflow
•Опыт работы с AWS Glue
•Опыт работы с Apache Iceberg
•Опыт работы с SQL и инструментами интеграции данных
•Опыт программирования на любом языке программирования, например Python или Scala
•Знание AWS сервисов, таких как S3/Lambda/API Gateways/DMS/RDS
•Опыт разработки как в Microsoft, так и в Linux/Cloud средах
•Сильные аналитические и навыки решения проблем
Желательно иметь
•Знакомство с концепциями хранилищ данных и техниками моделирования данных, такими как Inmon, Kimball, Data Vault
•Знакомство с AWS сервисами, такими как MSK и EMR
•Знакомство с технологиями контейнеризации и оркестрации, такими как Docker и Kubernetes
•Знакомство с базами данных для временных рядов или аналитики, такими как Elasticsearch
•Знакомство с потоковой передачей данных с использованием технологий, таких как Kafka
•Знакомство с инструментами управления версиями программного обеспечения, такими как GIT
•Знакомство с инфраструктурным скриптингом, таким как Terraform
•Знакомство с инструментами мониторинга данных и визуализации, такими как Prometheus и Grafana, Cloudwatch
•Скриптинг – Powershell, Unix скрипты
•Минимум 2 года опыта в области инженерии данных
•Отличные устные и письменные навыки общения на английском языке
•Хорошее стремление к обучению
•Умение расставлять приоритеты и выполнять несколько задач одновременно
Что мы предлагаем
Похоже на катание на американских горках: иногда жизнь в Betsson может быть молниеносно быстрой с поворотами и виражами, но всегда ВЕСЕЛО! Что ещё можно ожидать от бизнеса, где 75% сотрудников — миллениалы, а общая численность — 1700 человек, распределённых по 7 офисам, из которых 900 находятся в нашем головном офисе на Мальте!
