Data Engineer (LLM)
В Департамент продвинутой аналитики ищем Инженера данных на задачи по созданию и поддержке решений по подготовке больших данных, а так же созданию инструментов обработки больших данных в интересах развития Продвинутой Аналитики в Банке.
Чем предстоит заниматься:
- Создание и поддержка ETL-процессов загрузки данных в Datalake из IT-систем Банка для применения в моделях;
- Создание и поддержка витрин-предагрегатов и витрин с аналитическими признаками (features) на основании требований хабов департамента аналитики;
- Создание и поддержка витрин для мониторинга моделей машинного обучения;
- Создание и контроль работы проверок КД для крититических элементов данных;
- Выполнение функций владельца данных по витринам Datalake, созданных для разработчиков моделей.
Ожидаем от кандидата:
- Знание принципов полнотекствого поиска;
- Знание ElasticSearch/OpenSearch;
- Уверенное владение Python (применение ООП, знание стандартных библиотек), SQL(на уровне сложных запросов);
- Опыт разработки решений на Spark ( pyspark), решения задач с REST API;
- Опыт решения задач с сервисами хранения объектов HDFS / S3 / MinIO;
- Владение методологией гибкой разработки, опыт работы с системами контроля версий (BitBucket), JIRA и Confluence;
- Знание основных принципов работы с контейнерами (Docker, Kubernetes);
- Опыт работы на аналогичной должности в технологическом консалтинге / банках / телеком-операторах / IT-интеграторах / крупных технологических компаниях - от 2 лет;
- Владение английским языком - читает техническую литературу без словаря.
Желательно:
- опыт разработки и поддержки автоматизированных решений по контролю качества данных;
- опыт решения задач с Bl-инструментами (PowerBl/Tableau);
- опыт построения pipeline потоковой real-time обработки данных (Flink / Kafka);
- опыт решения задач с NoSQL БД (Cassandra / Redis).
Что мы предлагаем взамен:
-
Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования + квартальная премия по результатам KPI;
-
Гибридный формат работы (офис+удаленка), сезонный коворкинг в Сочи;
-
Сложные и интересные задачи, современный стек технологий;
-
Заботу о вашем здоровье: программа ДМС с первых дней работы, куда входит стоматология, обслуживание в лучших клиниках города, страхование и компенсация 10-ти дней больничного;
-
Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни;
-
Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook
и бизнес-изданий;
-
Предложения от Банка только для сотрудников: собственные спортзалы (Москва, Санкт-Петербург, Екатеринбург), а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины.