О компании
Avenga — международная инженерная компания, помогающая бизнесу работать с искусственным интеллектом в основе. С более чем 6000 экспертами по всему миру мы объединяем инженерный опыт с мышлением, ориентированным на ИИ, чтобы превращать амбициозные идеи в реальное воздействие в различных отраслях, технологиях и рынках.
В основе роли
Мы ищем старшего инженера платформы данных в CABA, чтобы присоединиться к нашей команде и индустриализировать Databricks в качестве корпоративной платформы данных, обеспечивая стандартизированную, автоматизированную, наблюдаемую и надежную модель для разработки и эксплуатации продуктов данных. Миссия заключается в сокращении ручных задач и индивидуальных зависимостей путем внедрения повторно используемых шаблонов и возможностей самообслуживания, что позволит платформе масштабироваться без пропорционального увеличения операционной нагрузки на команду.
Основные навыки, которые вы принесёте
•Опыт работы более 5 лет в области инженерии платформ данных, DataOps, DevOps, Site Reliability Engineering (SRE) или аналогичных ролях.
•Практический опыт работы с Databricks в масштабных корпоративных средах.
•Сильный опыт внедрения и управления CI/CD пайплайнами и рабочими процессами разработки на основе Git.
•Подтвержденный опыт работы с инфраструктурой как кодом, включая Terraform (обязательно) или эквивалентные технологии.
•Опыт работы с облачными платформами, управлением идентификацией и доступом (IAM), сетями, управлением секретами, сервисными учетными записями и автоматизацией инфраструктуры.
•Степень бакалавра в области инженерии, информационных технологий, компьютерных наук, информационных систем или смежных областях.
•Английский — уровень не ниже среднего.
•Возможность посещать офис один раз в неделю.
Влияние, которое вы создадите
•Проектировать и внедрять CI/CD пайплайны для Databricks, обеспечивая контролируемое продвижение артефактов между средами.
•Разрабатывать и поддерживать решения Infrastructure as Code (IaC) с использованием Terraform и других инструментов автоматизации.
•Автоматизировать предоставление и управление рабочими пространствами Databricks, разрешениями, вычислительными ресурсами, сервисными учетными записями и политиками платформы.
•Создавать повторно используемые шаблоны, фреймворки и инженерные стандарты для подключения новых продуктов и конвейеров данных.
•Автоматизировать процессы подключения пользователей, приложений и сервисов на платформе данных.
•Внедрять и поддерживать возможности наблюдаемости, включая мониторинг, логирование, оповещения и операционные метрики.
•Определять и управлять практиками операционной надежности, включая SLA, SLO, механизмы повторных попыток, рабочие процессы повторной обработки и процедуры восстановления.
•Улучшать надежность, масштабируемость, производительность и управление ёмкостью платформы.
•Поддерживать инициативы FinOps через распределение затрат, стратегии тегирования, отслеживание использования и оптимизационные мероприятия.
•Документировать стандарты платформы, архитектурные решения, операционные процедуры и инструкции по эксплуатации.
•Продвигать культуру самообслуживания, развивая возможности платформы, которые уменьшают ручное вмешательство и повышают производительность инженеров.
