Вау
Эта роль посвящена операционному обслуживанию, управлению и жизненному циклу доставки данных. В отличие от ролей, ориентированных на инфраструктуру, инженер DataOps отвечает за предоставление доступа пользователям, управление разрешениями платформы данных, выпуск развертываний аналитических конвейеров и наблюдаемость сервиса (мониторинг/оповещения), чтобы гарантировать доступность данных и соответствие требованиям без управления базовой облачной или сетевой архитектурой.
Эта роль включает активный мониторинг, разрешение инцидентов, разработку плана предотвращения инцидентов и взаимодействие с запросами данных при постоянном улучшении наших процессов и систем работы с данными, обеспечивая необходимую поддержку для оптимального качества данных.
Небольшой обзор того, чем вы будете заниматься:
•Доступ и предоставление прав: управление и аудит сервисных аккаунтов, AWS IAM политик для конвейеров данных, схем управления доступом на основе ролей (RBAC) и управление ролями и разрешениями в Snowflake.
•Управление релизами: выполнение и автоматизация развертываний кода конвейеров данных, логики оркестрации и схем баз данных.
•Наблюдаемость приложений: настройка, мониторинг и оптимизация порогов оповещений конвейеров в Amazon CloudWatch и Coralogix для регистрации сбоев выполнения задач и задержек доставки данных.
•Оркестрация приложений: управление рабочими процессами, расписаниями задач и разрешениями среды с использованием Apache Airflow.
•Предотвращение инцидентов: активное проектирование и внедрение стратегий профилактических операций, анализ тенденций системы, узких мест конвейеров и сбоев задач для устранения системных рисков до нарушения SLA.
•Разработка продвинутого мониторинга и оповещений: формирование и поддержка сложных паттернов наблюдаемости, создание панелей мониторинга в реальном времени и оповещений на основе порогов в Coralogix для выявления задержек, исчерпания ресурсов или аномалий.
•Целостность данных и первичная реакция: проведение анализа коренных причин аномалий выполнения конвейеров и сложных ошибок потоков данных, сотрудничество с командами аналитического инжиниринга для разработки постоянных, масштабируемых оперативных решений.
•Проведение тщательных расследований качества данных, выявление несоответствий и внедрение корректирующих действий в сотрудничестве с другими командами.
•Сотрудничество в инициативах по инженерии данных, с акцентом на улучшение существующих процессов и разработку новых решений для повышения эффективности работы с данными.
•Участие в мониторинге и разрешении инцидентов, при необходимости эскалация более сложных вопросов во вторую линию поддержки.
•Оптимизация ресурсов: мониторинг времени выполнения запросов и показателей потребления вычислительных ресурсов для выявления неиспользуемых ресурсов, предложение оптимизаций для поддержания технического совершенства и экономической эффективности.
•Управление инцидентами и выполнение дежурств по связанным с ролью технологиям.
•Внедрение инноваций на базе ИИ в операциях с данными: проактивное выявление возможностей использования ИИ, интеллектуальных агентов и автоматизации для оптимизации операций, ускорения расследования инцидентов и повышения надежности платформы. Эксперименты с новыми технологиями и превращение перспективных идей в практичные, значимые решения.
Что мы ищем
Обязательные требования:
•Хороший опыт настройки структур безопасности, привилегий интеграции сервисов и управления RBAC в корпоративных слоях данных (например, Snowflake и AWS IAM).
•Подтвержденный опыт управления, развертывания рабочих процессов и отладки сбоев выполнения задач в Apache Airflow.
•Продвинутые навыки разработки правил мониторинга облака, логирования метрик и автоматизированных структур оповещений с использованием Amazon CloudWatch и Coralogix.
•Высокая квалификация в написании сложных SQL-запросов для анализа наборов данных и отслеживания метаданных.
•Сильные навыки скриптинга на Python или shell для автоматизации операционных чек-листов, административных задач и аудита соответствия.
Желательные навыки:
•Знакомство с более широкими современными средами данных (AWS Glue, S3, Athena и Redshift).
•Опыт работы с концепциями наблюдаемости данных и механизмами контрактов данных.
•Хороший опыт анализа данных для выявления тенденций и отслеживания проблем качества данных.
•Отличные устные и письменные навыки общения на английском языке.
•Сильные межличностные и коммуникативные навыки с ориентированностью на клиента; способность строить позитивные отношения с внутренними клиентами (инженерами данных, аналитиками и бизнес-стейкхолдерами) и переводить сложные технические вопросы операций в понятные, действенные обновления.
•Сильная мотивация к самообучению: высоко проактивный специалист, стремящийся самостоятельно изучать новые технологии, документацию и лучшие отраслевые практики для постоянного развития своих навыков.
•Умение расставлять приоритеты, предвидеть риски и выполнять многозадачность под давлением.
•Владение SQL для запросов и управления наборами данных.
•Опыт работы с языками скриптов для автоматизации и оптимизации задач.
•Знакомство с инструментами мониторинга и методологиями разрешения инцидентов.
•Надежность и высокая ответственность в управлении операциями с данными и поддержке целей команды.
•Проактивный подход к решению проблем с вниманием к деталям.
•Приверженность поддержанию высоких стандартов качества и целостности данных.
•Обязательное наличие действующей сертификации AWS, ориентированной на операции/поддержку (например, AWS Certified SysOps Administrator).
•Действующая сертификация Snowflake (например, Snowflake SnowPro Core Certification) для подтверждения глубоких знаний платформы и управления данными.
Что мы предлагаем
Жизнь в Betsson иногда похожа на поездку на американских горках — молниеносная с поворотами, но всегда ВЕСЕЛАЯ! Что еще можно ожидать от компании, где 75% сотрудников — миллениалы, а численность составляет 1700 человек, распределенных по 7 офисам, из которых 900 работают в нашем головном офисе на Мальте! Мы понимаем, что это может быть не для слабонервных, но если вы инициативный, энергичный человек, любящий адреналин и всегда стремящийся расширять границы и бросать вызов себе, то вы отлично впишетесь в нашу команду.
Готовы принять вызов?
