О роли
Мы ищем Junior Data Engineer, который готов погрузиться в существующую инфраструктуру аналитики: разбираться в коде, оптимизировать пайплайны, исправлять баги и добавлять новые процессы. Стек уже настроен — ClickHouse, Airflow, API-интеграции, GitHub.
Но главное — это не просто поддержка. Мы находимся на этапе активного внедрения AI-решений в бизнес-процессы, и перед командой стоят амбициозные задачи по созданию больших продуктов с использованием LLM и RAG. У тебя будет возможность развиваться именно в этом направлении: участвовать в проектировании и интеграции ИИ-компонентов, работать с векторными базами данных, строить пайплайны для подачи контекста в модели.
Обязанности
•Поддержка и развитие ETL/ELT-процессов: обеспечение бесперебойной работы существующих пайплайнов данных (ClickHouse, Airflow), исправление ошибок и мониторинг качества данных.
•Работа с источниками данных: настройка и поддержка интеграций с внешними источниками через API, а также обработка файлов, поступающих по электронной почте.
•Администрирование инфраструктуры аналитики: работа с базами данных (ClickHouse, PostgreSQL), оптимизация запросов и структуры хранения.
•Автоматизация: написание скриптов на Python для автоматизации рутинных задач по загрузке и трансформации данных.
•Работа с Git: ведение кода пайплайнов в системе контроля версий (GitHub), участие в код-ревью.
•Участие в R&D проектах: активное участие в создании и внедрении новых больших проектов компании, связанных с интеграцией AI/LLM в бизнес-процессы (под руководством старших коллег).
Требования
•Высшее образование.
•Желательно дополнительное образование по соответствующему профилю.
•Опыт работы: от 1 года до 3 лет коммерческой разработки или администрирования в области Data Engineering.
•Язык программирования: уверенное знание Python.
•Базы данных: практический опыт работы с ClickHouse (создание таблиц, оптимизация, работа с ReplacingMergeTree) и PostgreSQL.
•Оркестрация: опыт настройки DAG'ов в Apache Airflow.
•Интеграции: опыт работы с внешними REST API.
•Инструменты: уверенное владение Git.
Будет преимуществом (плюсом)
•Опыт работы с LLM или фреймворками для работы с ИИ (LangChain).
•Понимание концепции RAG (Retrieval-Augmented Generation).
•Внимание к деталям и аккуратность в работе с данными.
•Инициативность, способность самостоятельно решать задачи и предлагать улучшения.
•Аналитический склад ума.
•Системность в принятии решений.
•Умение работать в команде и взаимодействовать с аналитиками.
•Навыки приоритизации и ведения нескольких задач параллельно.
•Ответственность за результат.
Условия
•Гибкий график работы: 5/2, с 8:00 до 17:00 (либо 9:00 до 18:00).
•Оформление согласно Трудовому законодательству РФ.
•Работа в комфортабельном офисе, возможен гибридный график или полная удаленка по московскому времени (UTC+3).
•Дружный коллектив.
•Наличие свободной парковки.
•Место работы: г. Химки, МТК ГРАНД 1, ул. Бутаково, 4.
