Описание
Мы ищем Data Engineer для присоединения к команде разработки. В этой роли вы будете проектировать, строить и оптимизировать современные архитектуры данных, с фокусом на Microsoft Fabric и Databricks для доставки масштабируемых решений для данных.
Задачи
•Разработка и поддержка надёжных пайплайнов данных (ETL/ELT) с использованием Azure Databricks и MS Fabric.
•Создание масштабируемых компонентов платформы данных с использованием Delta Lake, PySpark и SQL.
•Интеграция разнородных источников данных в централизованную Lakehouse-архитектуру.
•Оптимизация производительности пайплайнов и обеспечение качества данных и стандартов governance.
•Тесное взаимодействие со стейкхолдерами для перевода бизнес-требований в технические решения.
Требования
•Сильный практический опыт работы с Microsoft Fabric и Azure Databricks.
•Уверенное владение PySpark, SQL и построением Lakehouse/Delta Lake архитектур.
•Опыт работы в экосистеме Azure.
•Проактивный решатель проблем с хорошими коммуникативными навыками.
•Свободный английский (письменный и устный) обязателен.
Будет плюсом: опыт с Azure Synapse; знание немецкого языка.
Условия
•B2B
•Удалённо
•Полная занятость
•Начало в декабре, продолжительность — 6+ месяцев
