Описание
Solvd Inc. — AI-native консалтинговая и технологическая компания, предоставляющая услуги трансформации предприятий в области облачных технологий, данных, программной инженерии и искусственного интеллекта. После приобретения Tooploox компания обеспечивает полный цикл поставки — от стратегического консультирования и проектирования решений до разработки AI-решений под заказ и внедрения на уровне предприятия.
Задачи
•Обеспечивать техническое лидерство и сопровождать клиентов на пути успешной реализации проектов big data
•Вести проекты от архитектуры и проектирования до инженерии данных и развертывания моделей
•Сопровождать клиентов при миграциях
•Проектировать решения от концепции до продакшена
•Обеспечивать структурированное менторство для других членов команды
•Поддерживать технические предпродажные (pre-sales) активности
Требования
•Опыт лидирования в проектировании и полном цикле разработки распределённых решений на базе Databricks, включая архитектуры Lakehouse, ETL-пайплайны, потоковую и пакетную обработку данных, а также интеграции с облачными и локальными корпоративными системами клиентов
•Практический опыт построения big data пайплайнов
•Практический опыт программирования на Python
•Экспертные знания SQL и Spark или PySpark, включая загрузку данных из API, реляционных баз данных и других источников
•Практический опыт использования dbt в экосистеме Databricks
•Уверенное понимание управления данными (data governance), безопасности и соответствия требованиям (compliance)
•Практический опыт оптимизации платформы, включая конфигурацию кластеров, стратегии партиционирования, кэширование, автомасштабирование и оркестрацию задач
•Способность ясно объяснять базовые концепции Databricks и их практическое применение
•Степень бакалавра в области компьютерных наук, информационных систем, инженерии или эквивалентный опыт работы
Будет плюсом:
•Сертификация Databricks
•DevOps с Terraform
•Опыт построения масштабируемых пайплайнов машинного обучения на Databricks с использованием MLflow и Delta Lake
•Опыт развёртывания Databricks на Azure, AWS или GCP
•Опыт развёртывания Databricks для государственных клиентов
•Опыт создания интерактивных дашбордов и отчётов с помощью BI-инструментов, таких как Power BI
•Знание Scala
Условия
•Место работы: Колумбия
•Условия не указаны отдельно
