Описание
Платформы Data Lake в Альфа-Банке обеспечивают работу с Big Data и Object Storage при высокой нагрузке.
Задачи
•Сопровождать и эксплуатировать платформы Data Lake и инфраструктуру S3/Object Storage
•Мониторить, диагностировать и устранять инциденты
•Искать и устранять причины проблем производительности платформы и систем хранения
•Сопровождать Kubernetes и компоненты платформы Big Data: Spark, Airflow, Flink, Kafka, Iceberg
•Проводить RCA и разбирать итоги инцидентов
•Автоматизировать эксплуатационные задачи
•Взаимодействовать с командами Data Engineering и инфраструктуры
Требования
•Экспертный опыт администрирования Linux
•Опыт сопровождения высоконагруженных распределённых систем
•Глубокое понимание S3/Object Storage и архитектуры распределённых систем хранения
•Практический опыт эксплуатации Apache Spark, Airflow, Flink, Kafka и Apache Iceberg
•Опыт эксплуатации MinIO или других решений Object Storage; понимание репликации, кодирования с устранением избыточности, согласованности и отказоустойчивости
•Практический опыт диагностики CPU, RAM, сетей, дискового ввода-вывода, задержек и пропускной способности
•Опыт работы с системами наблюдаемости Prometheus и Grafana, оповещениями и анализом журналов
•Опыт автоматизации с Ansible, Terraform, Bash и Python
•Понимание управления инцидентами и проблемами, практик SRE, анализа первопричин и разбора итогов инцидентов
Условия
•Ставка 2 146 руб/час
•Долгосрочный проект с перспективой перехода в штат банка
•Требуется строгое соблюдение московского часового пояса
