22 сен

data engineer корпоративного DWH

ориентир по рынку
вакансия зп не указана
в среднем 305 283 ₽
Загрузи резюме, чтобы видеть мэтчи с вакансией

подготовьтесь к отклику

ai-инструменты

Чтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузите резюме

описание

Компания занимается подбором персонала, IT-аутстаффингом и рекрутментом. Вакансия связана с разработкой и развитием корпоративного хранилища данных, потоков данных, витрин и архитектуры DWH.

задачи

  • Проектировать и разрабатывать потоки данных с использованием ETL/ELT-инструментов;
  • Разрабатывать программный код и проводить его тестирование;
  • Реализовывать кастомные трансформации данных;
  • Проектировать и создавать прототипы и витрины данных;
  • Разрабатывать процедуры на языке PL/pgSQL;
  • Проводить анализ производительности существующих систем;
  • Оптимизировать SQL-запросы и структуры баз данных;
  • Участвовать в масштабировании и повышении производительности систем;
  • Развивать архитектуру DWH;
  • Анализировать и выбирать оптимальные технологии, инструменты и методологии;
  • Создавать и актуализировать базу знаний для пользователей хранилища данных;
  • Сопровождать и мониторить информационные системы в своей зоне ответственности.

требования

  • Знание принципов построения хранилищ данных и архитектуры DWH;
  • Понимание принципов работы MPP-систем;
  • Практический опыт работы с экосистемой Hadoop: HDFS, YARN, Apache Spark, Apache Kafka, Apache NiFi, Sqoop, Flume;
  • Уверенное знание SQL, включая DDL и DML;
  • Опыт анализа и оптимизации сложных SQL-запросов;
  • Опыт разработки на PL/pgSQL;
  • Практический опыт работы с Greenplum или отличное знание PostgreSQL;
  • Опыт работы с ETL-инструментами SAS Data Integration Studio и/или Informatica PowerCenter;
  • Понимание процессов проектирования потоков, преобразования и загрузки данных;
  • Опыт сопровождения и мониторинга информационных систем;
  • Навыки ведения проектной и технической документации;
  • Опыт работы с Git, Jira и Confluence;
  • Будет плюсом опыт проектирования высоконагруженных хранилищ данных, опыт масштабирования MPP- и Hadoop-систем, участие в проектах по развитию крупных корпоративных DWH, опыт построения сложных ETL/ELT-процессов и витрин данных.

условия

  • Удалённая работа.

Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайтесь: это мошенничество.

Про зарплаты

Анонимные данные по зарплатам и грейдам.
Можно сверить вилку с рынком.

Посмотреть зарплаты

Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайтесь: это мошенничество.