ETL-разработчик (Data Engineer), Москва

СберСпасибо – самая большая банковская программа лояльности в России. Участники копят бонусы за покупки по карте и обменивают их на скидки у партнеров.

70 миллионов участников программы

10 000 транзакций в секунду

> 1000 региональных и федеральных партнеров

Сегодня наша команда развивает единую программу лояльности экосистемы Сбера.

Это крутой проект и у тебя есть возможность принять в нем участие!

Стек: PostgreSQL, Greenplum, DBT, Minio, ClickHouse, SQL, Python, Kafka, Rest API

Чем предстоит заниматься:

• Проектировать, разрабатывать, тестировать ETL процессы на основе DBT + Python;
• Мониторить и оптимизировать процессы обработки данных;
• Поддерживать и разрабатывать потоки данных с использованием Kafka;
• Развивать Data Quality движок;
• Разрабатывать, поддерживать и оптимизировать инфраструктуру внутренних сервисов;
• Участвовать в проектировании архитектуры DWH и поддерживать существующие решения;
• Разрабатывать решения и инструменты для автоматизации процессов;
• Локализировать и устранять инциденты;
• Прорабатывать и настраивать CI/CD пайплайны;
• Активно участвовать в проведении code review.

Что ждем от вас:

• Крепкие знания SQL (оптимизация запросов, физические соединения таблиц);
• Уверенные знания Python;
• Опыт работы с промышленными ETL (DBT как преимущество, SAS DI, Informatica, ODI, DataStage);
• Понимание принципов проектирования хранилищ данных;
• Опыт работы с MPP (GP как преимущество)/ колоночными СУБД (Clickhouse как преимущество);
• Опыт работы в Linux на уровне пользователя
• Опыт работы разработчиком DWH от 3 лет.

Было бы здорово, если ты:

• знаком с Git;
• работал с Python 3.8.13;
• имеешь представление (или практический опыт работы) об Airflow (у нас не используется);
• слово Kafka для тебя не в новинку, либо ты не прочь разобраться что это такое.

Что мы предлагаем:

• Стильный офис около м. Кутузовская;
• Работа в аккредитованной IT компании;
• Возможность работать как в офисе, так и из дома;
• Льготная ипотека для сотрудников;
• Корпоративный спорт;
• Расширенный ДМС с первого дня работы (страхование жизни и здоровья, страховка выезжающего за границу, льготное страхование близких и т.д.);
• Обучение в Корпоративном университете Сбера;
• Скидки, бонусы и специальные предложения от экосистемы Сбера и партнёров.

Если нравится автоматизировать рутинные процессы, оптимизировать процесс загрузки данных в хранилище и обучаться новому — ждём в СберСпасибо!