Описание
AgileEngine — компания из списка Inc. 5000, создающая award-winning софт для брендов Fortune 500 и стартапов в 17+ индустриях. Мы входим в число лидеров в области разработки приложений и AI/ML, а наша культура, ориентированная на людей, отмечена несколькими наградами Best Place to Work. Мы ищем Data Platform Engineer для модернизации, миграции и поддержки надёжной инфраструктуры data-platform в облачных и корпоративных средах.
Задачи
•Помогать мигрировать инфраструктуру и data-platform воркloads с существующей инфраструктуры на новую.
•Помогать переносить data-platform инфраструктуру и воркloads в AWS us-east-2 (USE2), включая необходимую связность, деплой и операционные предусловия.
•Обеспечивать безопасный, управляемый доступ к данным для потребителей data-platform и downstream-систем.
•Модернизировать архитектуру data-platform, инструменты, оркестрацию, хранение и операционные практики в соответствии с организационными стандартами.
•Поддерживать Snowflake, Confluent/Kafka, AWS и миграцию/эксплуатацию data-platform инфраструктуры на stage и production.
•Участвовать в production troubleshooting, incident response, документировании, создании runbook'ов и координации миграции между командами.
•Использовать Terraform/IaC, GitLab, мониторинг и документированные процессы для обеспечения повторяемых и проверяемых изменений.
Требования
•3+ года senior-уровня практического опыта в production data-platform engineering, с platform/DevOps-направленным фоном и сильным опытом работы с данными.
•Сильные навыки Python, Bash и SQL.
•Production-опыт с Snowflake и Confluent/Kafka с фокусом на DevOps и операции.
•Глубокий опыт в одном и рабочее знание другого: Deep Snowflake и AWS с рабочим знанием Kafka (topics, connectors, schemas), ИЛИ Deep Kafka/Confluent и AWS с рабочим знанием Snowflake.
•Опыт эксплуатации или миграции production-систем между development, stage и production средами.
•Сильные навыки troubleshooting, incident-response, тестирования, документирования и межкомандной коммуникации.
•Опыт с принципом least-privilege access, change control, управлением секретами и безопасными операционными практиками.
•Сильные навыки межфункциональной коммуникации.
Будет плюсом
•Apache Spark и Hadoop/Hive/HQL, включая модернизацию или миграцию legacy workloads.
•Snowpark, альтернативы dbt, AWS Glue, Monte Carlo или другие инструменты для качества данных и каталогизации.
•Миграция legacy Airflow, Hadoop или Hive workloads на cloud-native или managed платформы.
•Опыт работы в рамках корпоративной миграции или слияния компаний и приведения систем в соответствие со стандартами новой организации.
•Знакомство с паттернами миграции Snowflake-to-Iceberg или Snowflake-to-data-lake.
Условия
•Профессиональный рост: менторство, TechTalks и персонализированные карьерные дорожные карты.
•Конкурентная компенсация: выплаты в USD с бюджетами на образование, фитнес и командные активности.
•Интересные проекты: современные решения для Fortune 500 и топовых продуктовых компаний.
•Flextime: гибкий график с возможностью удалённой работы и работы в офисе.
