О компании
Intellias — технологическая компания, предоставляющая решения в области data engineering и разработки ПО. Проекты компании включают крупномасштабные data-платформы, системы клиентских данных, data engineering для комплаенса, интеграцию источников данных и модернизацию платформ.
Задачи
•Разработка и поддержка batch и streaming data pipelines с использованием Scala и Spark
•Создание и поддержка решений обработки данных на базе Kafka
•Создание и поддержка Airflow DAG и workflow
•Реализация моделей данных, маппинга схем и проверок валидации
•Мониторинг работоспособности пайплайнов, устранение проблем в продакшене и поддержка деплоев
•Ревью и валидация AI-сгенерированного кода и предложенных реализаций
•Взаимодействие с senior-инженерами, продуктовыми командами и потребителями данных
Требования
•3+ года опыта в Data Engineering
•Практический опыт работы со Scala и Apache Spark
•Опыт работы с batch processing и распределёнными системами данных
•Опыт работы с Kafka, Kafka Streams, Flink или аналогичными streaming-технологиями
•Опыт работы с Apache Airflow
•Знание моделирования данных, SQL и разработки ETL/ELT
•Опыт тестирования, код-ревью, работы с системами контроля версий и CI/CD
•Сильные навыки troubleshooting и поддержки продакшена
•Хорошие коммуникативные навыки и ownership mindset
Будет плюсом
•Опыт работы с Flink
•Cassandra, DynamoDB, ScyllaDB или другие NoSQL базы данных
•Опыт работы с клиентскими данными, clickstream, loyalty, booking или транзакционными данными
•Опыт работы с Copilot, Claude, Cursor или другими AI-инструментами разработки
•Понимание мониторинга качества данных и observability
Условия
•Удалённая работа доступна из Колумбии, Индии, Мексики, Перу, Польши и Украины
•Дополнительные условия не указаны