Описание: Titan Operating System S.L. (Titan OS), барселонская технологическая компания в сфере развлечений и рекламы, ищет вас! Наша платформа объединяет в одном решении технологии контент-дискавери и рекламные технологии, помогая ведущим ТВ-брендам получать больше ценности. Titan OS работает на устройствах крупных брендов, включая Philips, AOC и JVC, охватывая миллионы зрителей в Европе и Латинской Америке. Titan OS также обеспечивает работу бесплатных премиальных FAST-каналов на отдельных Android TV от SONY.
Задачи:
•Строить, поддерживать и улучшать батчевые и стриминговые пайплайны получения данных, которые доставляют данные ТВ-событий, партнёрские фиды (BigQuery, PostgreSQL, ad-server и другие API) и логи в наш lakehouse на S3/Iceberg и Snowflake
•Вносить вклад во внутренний data platform SDK и CLI (Python): общий фреймворк, шаблоны, локальное окружение разработки и CI/CD, на которых строится каждая команда data-продуктов
•Строить и поддерживать модели данных SQLMesh в наших data-продуктах, от core и production датасетов до слоёв аналитики и отчётности
•Поддерживать надёжность данных: контракты данных, аудиты, SLA по свежести данных, lineage (OpenLineage) и метаданные/каталогизацию (OpenMetadata), а также мониторинг и реагирование на инциденты при поломке пайплайнов
•Отвечать за privacy-критичные процессы, включая пайплайны GDPR-удаления, данные согласий и обработку PII, с полной аудируемостью и точным контролем доступа через AWS Lake Formation
•Управлять инфраструктурой платформы данных как кодом (Terraform/Terragrunt) в AWS-сервисах, таких как MWAA, Glue, EMR, Kinesis, S3, Lake Formation и IAM
•Помогать оптимизировать производительность и стоимость Snowflake-хранилищ, Spark/Glue задач и хранения данных
•Работать с Infrastructure, Backend, Ad-Tech и бизнес-стейкхолдерами, чтобы понимать их потребности в данных и превращать их в хорошо спроектированные решения
Требования:
•3+ года опыта в data engineering или на ролях data platform, работа с продакшн-пайплайнами данных
•Хорошие навыки Python, умение писать чистый, тестируемый и переиспользуемый код
•Сильный SQL и практический опыт работы со Snowflake (или аналогичным облачным хранилищем)
•Опыт работы с Apache Airflow (MWAA будет плюсом) для оркестрации воркфлоу
•Опыт работы с фреймворками SQL-трансформации, такими как SQLMesh или dbt, и хорошее понимание моделирования данных
•Знакомство с lakehouse-технологиями: Apache Iceberg, Parquet, Spark, AWS Glue / EMR
•Опыт работы с AWS data-сервисами (S3, Glue, Kinesis, IAM, Secrets Manager)
•Опыт работы с инфраструктурой как кодом (Terraform) и CI/CD с GitHub Actions
•Забота о качестве данных: тестирование, observability и стремление делать всё правильно
•Сильные коммуникативные навыки и свободное владение английским
Будет плюсом:
•Опыт работы с AWS Lake Formation или другими инструментами управления доступом к данным
•Опыт в AdTech, CTV/OTT или стриминговых медиа (данные ad-server, FAST-каналы, телеметрия устройств)
•Знакомство с GDPR, управлением согласиями (например, OneTrust) и процессами удаления PII
•Опыт работы с OpenLineage/Marquez, OpenMetadata, или контрактами данных и управлением схемами
•Опыт получения данных из BigQuery или PostgreSQL источников
•Опыт работы с Terragrunt или Go
•Интерес к AI-assisted data engineering (LLM-инструменты, MCP-интеграции с хранилищем)
Условия:
•Офис в центре Барселоны, рядом с общественным транспортом
•Конкурентная компенсация
•Частная медицинская страховка
•Дружелюбная, разнообразная и международная рабочая среда
•Возможность выйти за пределы зоны комфорта и профессионально развиваться в захватывающей и быстрорастущей индустрии CTV
•Изменить будущее ТВ! Уникальная возможность присоединиться к хорошо финансируемой, быстрорастущей компании на ранних стадиях и помочь сформировать продукт/бизнес, который повлияет на миллионы