Описание
Solvd Inc. — AI-native консалтинговая и технологическая компания, предоставляющая услуги по трансформации предприятий в области облачных технологий, данных, разработки ПО и искусственного интеллекта. После приобретения Tooploox компания предоставляет полный цикл услуг — от стратегического консалтинга и проектирования решений до разработки AI-продуктов и внедрения на уровне предприятия.
Задачи
•Проектировать, строить и оптимизировать масштабируемую инфраструктуру данных для задач риск-менеджмента и комплаенса
•Разрабатывать батчевые и потоковые пайплайны с использованием современных big data технологий
•Внедрять надёжные ETL и ELT процессы для структурированных и неструктурированных источников данных
•Активно работать с сервисами данных AWS, включая EMR, Redshift, S3, Glue, Lambda и Kinesis
•Строить высокопроизводительные системы с низкой задержкой для принятия решений в реальном или近реальном времени
•Сотрудничать с дата-сайентистами, аналитиками и инженерными командами для предоставления надёжных и хорошо документированных датасетов
•Переводить бизнес-требования в технические спецификации и масштабируемые решения данных
•Менторить членов команды и вносить вклад в лучшие практики и переиспользуемые фреймворки
•Оптимизировать процессы отчётности, аналитики и подготовки данных
•Заменять ручные процессы автоматизированными, повторяемыми системами
•Поддерживать настройку производительности, мониторинг и оптимизацию платформы
Требования
•Степень бакалавра в области компьютерных наук, инженерии, математики или смежной области
•3 или более лет практического опыта в data engineering или смежных областях
•Сильные навыки SQL и моделирования данных для аналитики и хранилищ данных
•Опыт построения ETL или ELT пайплайнов в масштабе
•Опыт работы с Hadoop, Hive, Spark, HBase или EMR
•Знание принципов распределённых систем и хранения данных
•Базовые навыки скриптинга на Python или Scala
•Знакомство с концепциями машинного обучения
Будет плюсом:
•Опыт работы с сервисами данных AWS, такими как Redshift, S3, Glue, EMR, Kinesis, Firehose и Lambda
•Опыт работы с нереляционными хранилищами данных
•Опыт сотрудничества с кросс-функциональными командами по рискам, комплаенсу или аналитике
•Хорошее понимание принципов управления данными, качества данных и безопасности
Условия
•Глобальная команда с возможностями сотрудничества между континентами и культурами
•Инклюзивная среда, ориентированная на непрерывное обучение, инновации и этические стандарты ИИ
