Описание
ГНИВЦ разрабатывает и интегрирует государственные информационные системы и коммерческие решения для налогового мониторинга. Компания также оказывает услуги по автоматизации бизнес-процессов, развитию ИТ-инфраструктуры, управлению данными и аналитике, системной интеграции, разработке программного обеспечения и информационной безопасности.
Задачи
•Разрабатывать и поддерживать Big Data на крупном проекте
•Разрабатывать и сопровождать ETL-процессы и потоковые пайплайны на Spark (Java/Scala)
•Интегрировать источники и хранилища данных: HDFS, Hive, HBase, Oracle, PostgreSQL, Kafka, ClickHouse
•Писать SQL-запросы
•Оптимизировать производительность Spark-задач и процессов загрузки и выгрузки
•Участвовать в проектировании архитектуры и внедрять лучшие практики разработки под Big Data
•Оптимизировать производительность на уровне кластера: настраивать Spark, partitioning и broadcasting
Требования
•5+ лет коммерческой разработки на Java и Scala, из них 2–3 года в Big Data
•Практический опыт работы с Apache Spark
•Знание экосистемы Hadoop: HDFS, Hive, HBase
•Опыт работы с Kafka
•Хорошее знание SQL
•Опыт работы с реляционными СУБД
•Уверенное владение Linux
•Глубокое понимание внутреннего устройства Spark: RDD/DataFrame API, shuffle, Catalyst Optimizer
•Опыт оптимизации производительности
•Понимание принципов работы распределённых систем: HDFS, ZooKeeper, YARN
•Опыт взаимодействия с бизнес-заказчиками и аналитиками, умение переводить требования в архитектуру решения
Условия
•Возможность работать полностью дистанционно на территории РФ, в офисе или по гибридному графику
•Пятидневная рабочая неделя: с понедельника по четверг с 09:00 до 18:00, в пятницу с 09:00 до 16:45
•Конкурентная заработная плата по результатам собеседования и премии за эффективную работу и достигнутые результаты
•Официальное трудоустройство с соблюдением требований ТК РФ
•Оплачиваемый отпуск и дополнительная выплата 50% от оклада после 11 месяцев работы
•Заработную плату выплачивают дважды в месяц
•Компенсация больничного до 7 дней с сохранением полной оплаты, эквивалентной рабочему дню
•ДМС после испытательного срока, включая стоматологию
•Возмещение до 50% затрат на занятия спортом
•Профессиональное обучение и сертификация за счёт компании
•Внутренние и внешние митапы, хакатоны, конференции, семинары и тренинги
•Партнёрские программы по изучению иностранных языков и развитию профессиональных навыков от Skyeng и Skillbox
•Доступ к корпоративной библиотеке Alpina Digital
•Пять дополнительных оплачиваемых выходных в календарный год для сотрудников, проработавших в компании более 11 месяцев
