Data engineer (middle)

Сегодня билайн — компания изменений, чутко реагирующая на потребности рынка и людей. А ещё билайн — это команда, объединённая общими ценностями и общей целью — быть лидером телеком и digital рынков, предоставляя нашим клиентам новейшие продукты и услуги, а также сервис самого высокого уровня.

Итак, вам предстоит:

• Написание ETL/ELT пайплайнов обработки данных;

• Создание и поддержка витрин данных;

• Развитие инструментов контроля и поддержания качества данных (data quality / data governance).

• Опыт работы в роли Data Engineer от 2 лет;

• Отличные знания SQL: оптимизация запросов, понимание планов запроса, внутренней работы SQL (оптимизация запросов, join, типы индексов и тд);

• Понимание концепции (звезда, Data Mesh, Data Vault) хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality;

• Знание инфраструктурных инструментов: Docker, bash, git, CI/CD, kubernetes, grafana, sentry;

• Понимание архитектуры Apache Spark, опыт по анализу и оптимизации обработки данных на Spark;

• Опыт работы с Hadoop от 1 года.

Наш стек:

• Scala / Python
• Hadoop (hdfs, hive)
• Apache

• Трудоустройство в аккредитованную ИТ-компанию;
• Удаленный формат работы;
• Сильную команду специалистов, с которой можно расти;
• Свободу в принятии решений, возможность влиять на процесс и результат;
• Развитое внутреннее DE комьюнити (chapter из 150+ человек) с регулярными митапами и встречами по обмену опытом;
• Ежегодный процесс ревью;
• Десятки Пбайт разнообразных данных - от классических табличных до гео, графов, кликстримов, текстов и картинок;
• Внешнее и внутреннее обучение, участие в митапах и конференциях;
• Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках;
• Корпоративные скидки на фитнес, обучение, путешествия и т.п.
• Служебную сотовую связь.