Neoflex

дата-инженер больших данных

Коротко

Дата-инженер в команду Центра компетенций BDS (большие данные, DWH) IT-компании Neoflex в Москве, задача — миграция данных из источников на единую платформу. Работа включает оптимизацию кода на Spark, написание кода на SQL, Python, Spark, настройку и поддержку DAG-ов в Airflow, тестирование и обеспечение качества данных. Требуются опыт со Spark/Pyspark, глубокие знания SQL, опыт с Airflow и Hadoop, понимание распределенных вычислений. Плюсом будет опыт с Iceberg, StarRocks, Trino и знание банковской сферы.

О компании
Мы – Neoflex. Аккредитованная IT компания. За 20 лет работы мы создали 12+ готовых решений для бизнеса, так же занимаемся заказной разработкой программного обеспечения. Сейчас мы расширяем команду, занимающуюся проектом по миграции данных из источников на единую платформу. Команда входит в Центр компетенций BDS - одно из сильнейших подразделений нашей Компании, экспертов в области работы с большими данными, построения DWH.
Задачи
•Оптимизация своего и чужого кода на Spark
•Написание эффективного кода на SQL, Python, Spark
•Настройка и поддержка DAG-ов в Airflow для оркестрации процессов
•Тестирование и отладка кода, обеспечение качества данных
•Взаимодействие с командой и заказчиком по уточнению требований
Требования
•Высшее образование
•Опыт работы со Spark, знание Pyspark
•Знания Spark архитектуры, и вопросов производительности
•Глубокие знания SQL
•Опыт работы с Airflow (написание и поддержка DAG-ов)
•Понимание принципов распределенных вычислений (умение использовать нативные инструменты Spark)
•Опыт работы с Hadoop
•Умение работать в команде и следовать процессам заказчика
Будет плюсом:
•Знание экономики, финансов, банковской сферы
•Опыт работы с Iceberg, StarRocks, Trino
Условия
•Достойная оплата труда + компенсационные, стимулирующие и мотивационные выплаты, бонусы за участие в реферальной программе
•Работа в команде профессионалов, готовых делиться экспертизой
•Официальное трудоустройство по ТК РФ, аккредитация IT
•Расширенный социальный пакет: страховка ДМС (с 3-го месяца работы, стоматология, возможность подключения родственников, телемедицина, полис ВЗР)
•Сотрудникам со стажем в Neoflex более 3 месяцев при предоставлении листка нетрудоспособности устанавливается доплата до полного заработка за период болезни
•Обучение детей сотрудников ИТ специальностям
•Компенсация затрат на фитнес и занятия английским языком
•Обеспечение техникой для работы (ноутбук, наушники, мышь)
•Профессиональное развитие в Учебном Центре (курсы по работе с большими данными, видео лекции, тренажеры, карьерный коучинг, лекции, тренинги, конференции, участие в митапах)
•Возможность пройти проф.сертификацию
•Прозрачная система карьерного развития Performance Review
•Персональный куратор с первого дня работы
•Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия, мотивационные награждения
•Комфортная атмосфера в филиалах компании в городах: Москва, Санкт-Петербург, Нижний Новгород, Пенза, Воронеж, Саратов, Самара, Краснодар, где есть лаунж и фотозоны, вендинги в кухнях, пространство для медитаций и другие секретные места, о которых знают только сотрудники

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте