13 авг

дата инженер высоконагруженной ETL-платформы

ориентир по рынку
вакансия зп не указана
в среднем 293 851 ₽
Загрузи резюме, чтобы видеть мэтчи с вакансией

подготовьтесь к отклику

ai-инструменты

Чтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузите резюме

описание

МТС Web Services предоставляет облачные, AI-сервисы и платформенные решения для бизнеса — от работы с данными до разработки продуктов и оптимизации процессов. Компания также развивает публичную платформу собственной разработки MWS Cloud Platform. Команда проектирует и разрабатывает высоконагруженную ETL-платформу для сбора, агрегации, управления и передачи данных с сетевых систем оператора связи МТС.

задачи

  • Проектировать архитектуру, согласовывать требования, выбирать технологии и средства реализации решений;
  • Планировать и реализовывать ETL-процессы, включая формирование источников нормализованных событий с контекстом, реализацию мультифакторной корреляции, профилирование устройства и абонента, передачу сигналов в ГИС;
  • Тестировать и автоматизировать запуск ETL-конвейеров;
  • Автоматизировать доставку, установку и обновление ПО и конфигураций;
  • Мониторить и исследовать проблемы производительности ETL-процессов в облачной инфраструктуре;
  • Участвовать в автоматизации сценариев функционального, интеграционного и нагрузочного тестирования ПО;
  • Работать с дефектами, вести документацию по решению.

требования

  • Знание технологий обработки данных в реальном времени;
  • Опыт проектирования и реализации ETL-процессов «под ключ», включая создание компонентов автоматизации;
  • Навыки написания пайплайнов и автоматизации процессов на Python;
  • Уверенное знание SQL;
  • Опыт создания Spark-приложений для распределённой потоковой обработки больших данных;
  • Опыт работы с брокерами сообщений Kafka;
  • Умение оркестрировать ETL-задачи с помощью Airflow или аналогов;
  • Навыки проектирования и поддержки различных СУБД, включая ClickHouse и Greenplum;
  • Опыт работы с микросервисной архитектурой, Docker и Kubernetes;
  • Опыт работы с Git и GitLab;
  • Опыт от 3 до 6 лет;
  • Будет плюсом опыт работы с S3.

условия

  • Медицинская страховка с первого месяца со 100% покрытием расходов, включая стоматологию, а также страхование жизни и здоровья в поездках за рубеж;
  • Возможность застраховать родственников с корпоративной скидкой;
  • Единая подписка МТС Premium, включающая KION light, МТС Music и 30 дней бесплатного пользования подпиской OZON Premium;
  • Скидки и предложения от партнёров на фитнес, занятия английским и другое;
  • Отпуск 28 календарных дней и 3 дополнительных дня за ненормированный или гибкий рабочий день;
  • Собственная платформа MTS Ocean для получения ИТ-ресурсов;
  • Профессиональные гильдии инженеров по направлениям;
  • Внутренняя площадка TechTalks;
  • Участие во внешних IT-конференциях;
  • Курсы и вебинары в корпоративном университете, электронные библиотеки;
  • Гибридный и удалённый формат в зависимости от локации в рамках РФ.

Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайтесь: это мошенничество.

Про зарплаты

Анонимные данные по зарплатам и грейдам.
Можно сверить вилку с рынком.

Посмотреть зарплаты

Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайтесь: это мошенничество.