Чтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузите резюме
описание
Команда разработки OneDWH создает единое корпоративное хранилище данных взамен разрозненных решений. Данные хранятся в кластерах YTsaurus, а команда развивает каталог данных, ETL-фреймворк и проверки качества данных.
задачи
Развивать платформу DWH как продукт;
Создавать удобные инструменты для дата-инженеров: поиск данных, заведение и сопровождение ETL;
Создавать удобные инструменты для аналитиков, работающих с данными в OneDWH;
Работать с графами зависимостей ETL-процессов: планировать выполнение, динамически распределять процессы по кластерам и оптимизировать их;
Строить отказоустойчивые решения для критичных данных.
требования
Опыт разработки сервисов на Go;
Уверенное владение PostgreSQL;
Опыт работы с Kafka;
Хорошее знание алгоритмов и структур данных, особенно графовых;
Будет плюсом знакомство с Java, Python, Spark или YTsaurus, опыт в области DWH, ETL или дата-инженерии, опыт работы с Airflow, опыт работы с CI/CD-пайплайнами в GitLab или другой системе, желание тесно работать с дата-инженерами и аналитиками.