Top Selection

data engineer корпоративного DWH

Коротко

Вакансия связана с разработкой и развитием корпоративного хранилища данных (DWH), потоков данных, витрин и архитектуры. Требуется практический опыт работы с экосистемой Hadoop (HDFS, YARN, Spark, Kafka, NiFi, Sqoop, Flume), уверенное знание SQL, опыт разработки на PL/pgSQL и работы с Greenplum/PostgreSQL, а также опыт с ETL-инструментами SAS Data Integration Studio и/или Informatica PowerCenter. Работа полностью удалённая, компания занимается подбором персонала и IT-аутстаффингом.

Описание
Компания занимается подбором персонала, IT-аутстаффингом и рекрутментом. Вакансия связана с разработкой и развитием корпоративного хранилища данных, потоков данных, витрин и архитектуры DWH.
Задачи
•Проектировать и разрабатывать потоки данных с использованием ETL/ELT-инструментов
•Разрабатывать программный код и проводить его тестирование
•Реализовывать кастомные трансформации данных
•Проектировать и создавать прототипы и витрины данных
•Разрабатывать процедуры на языке PL/pgSQL
•Проводить анализ производительности существующих систем
•Оптимизировать SQL-запросы и структуры баз данных
•Участвовать в масштабировании и повышении производительности систем
•Развивать архитектуру DWH
•Анализировать и выбирать оптимальные технологии, инструменты и методологии
•Создавать и актуализировать базу знаний для пользователей хранилища данных
•Сопровождать и мониторить информационные системы в своей зоне ответственности
Требования
•Знание принципов построения хранилищ данных и архитектуры DWH
•Понимание принципов работы MPP-систем
•Практический опыт работы с экосистемой Hadoop: HDFS, YARN, Apache Spark, Apache Kafka, Apache NiFi, Sqoop, Flume
•Уверенное знание SQL, включая DDL и DML
•Опыт анализа и оптимизации сложных SQL-запросов
•Опыт разработки на PL/pgSQL
•Практический опыт работы с Greenplum или отличное знание PostgreSQL
•Опыт работы с ETL-инструментами SAS Data Integration Studio и/или Informatica PowerCenter
•Понимание процессов проектирования потоков, преобразования и загрузки данных
•Опыт сопровождения и мониторинга информационных систем
•Навыки ведения проектной и технической документации
•Опыт работы с Git, Jira и Confluence
•Будет плюсом: опыт проектирования высоконагруженных хранилищ данных, опыт масштабирования MPP- и Hadoop-систем, участие в проектах по развитию крупных корпоративных DWH, опыт построения сложных ETL/ELT-процессов и витрин данных
Условия
•Удалённая работа

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте