Описание: Компания-консалтинг занимается разработкой современных дата-платформ и крупномасштабных решений в области data engineering, с фокусом на масштабируемость, производительность и современные практики data & AI engineering.
Задачи:
•Построение и улучшение современных дата-платформ
•Работа с Databricks и Delta Lake
•Разработка data-решений с использованием Python и PySpark
•Написание и оптимизация SQL и data engineering workflows
•Построение и поддержка data pipelines и ETL/ELT процессов
•Оптимизация производительности платформ
•Работа с облачной инфраструктурой Azure
•Работа в Kubernetes и контейнеризированных средах
•Проектирование масштабируемых архитектур данных и решений
•Troubleshooting и production support
•Построение, оптимизация и доработка существующих решений
Требования:
•2–3+ года практического опыта работы с Databricks
•Сильные навыки Python и PySpark
•Отличные навыки SQL
•Опыт работы с Azure
•Опыт работы с Kubernetes
•Глубокое понимание data engineering и архитектуры
•Опыт оптимизации Databricks/Spark workloads
•Способность работать самостоятельно на позиции senior-инженера
•Будет плюсом: сертификации Databricks
Условия:
•Долгосрочный контракт на 12+ месяцев
•B2B-сотрудничество