# Старший инженер по данным (Стокгольм)
Xebia — это глобальный партнер в области искусственного интеллекта, цифровой трансформации и инженерии. С более чем 25-летним опытом и командой из 5000 профессионалов в 16 странах, мы помогаем организациям проектировать и создавать масштабируемые продукты, платформы и решения, основанные на данных.
Мы специализируемся на искусственном интеллекте, данных и облачных технологиях, интеллектуальной автоматизации и цифровых продуктах, сочетая глубокую техническую экспертизу с сильным акцентом на инженерное совершенство и культуру, ориентированную на людей.
В регионе ЦВЕ мы — команда из почти 1000 экспертов, создающих современные приложения, платформы данных и AI-решения для клиентов, таких как Millennium, ING, Play, Edenred, Arabian Drilling, FedEx, Leroy Merlin, Truecaller, Volotea, Schmitz Cargobull и многих других. Мы работаем с ведущими технологиями, включая AWS, Azure, GCP, Databricks и Snowflake, и объединяем сильную инженерную культуру с консультативным подходом и постоянным фокусом на рост и обмен знаниями.
Вы будете:
•Предлагать и реализовывать архитектуру обработки пользовательских данных в Airflow, Spark, dbt и BigQuery, включая точки шифрования, производные таблицы, обратное заполнение и партиционирование.
•Мигрировать существующие пайплайны по одному, сохраняя их выходные данные неизменными, используя построенный вами регрессионный каркас.
•Проектировать и внедрять процессы, которые команда будет использовать после миграции, включая обзоры изменений пайплайнов, стандарты тестирования, разбор инцидентов и контрольные списки релизов.
•Рефакторить пайплайны для удаления дублирующихся шагов и скопированной логики.
•Создавать задания проверки, чтобы демонстрировать соблюдение правил жизненного цикла данных от начала до конца.
•Работать в паре и наставлять инженера данных с целью обеспечить независимое владение командой мигрированными пайплайнами.
•Делить обязанности по обслуживанию пайплайнов и обработке инцидентов, а также устранять коренные причины.
•Документировать ключевые решения в кратких записях об архитектурных решениях.
Ваш профиль:
•Глубокий практический опыт работы с Airflow, Spark, dbt, BigQuery и Python.
•Опыт технического руководства хотя бы одной миграцией пайплайна от начала до конца.
•Опыт рефакторинга работающего пайплайна с доказательством неизменности его выходных данных.
•Доказанная способность внедрять инженерные практики, такие как тестирование, код-ревью и обработка инцидентов, и помогать команде последовательно их применять.
•Опыт наставничества с конкретным результатом.
•Практический подход к техническим решениям в сочетании со способностью поддерживать и направлять других инженеров.
Требуется работа из региона Европейского Союза и разрешение на работу.
Желательно иметь:
•Опыт работы с шифрованием данных в состоянии покоя, соблюдением требований по хранению или удалению данных, например GDPR.
•Опыт работы с конвертным шифрованием и менеджером ключей, таким как GCP KMS, функции AEAD в BigQuery или Tink.
•Опыт работы с уровневой безопасностью столбцов в BigQuery, тегами политики или Data Catalog.
•Опыт работы с Config Connector (KCC) для управления ресурсами GCP из Kubernetes.
•Опыт работы с событиями Kafka.
Процесс найма:
Просмотр резюме – звонок HR – собеседование – собеседование с клиентом – решение
