Data Engineer (DWH)

Обязанности:

• Анализ и валидация данных из различных источников, сверка между системами.
• Обработка больших объемов данных для интеграции с Data Lake.
• Обновление стороннего ПО по инструкции.
• Подготовка документов по таблицам/датамартам и технологическим процессам, внесение в базу знаний.
• Анализ существующих таблиц для оптимизации процессов.
• Консультирование сотрудников по структуре данных и технологиям обработки.
• Обеспечение качества и своевременности предоставляемой информации.
• Поддержка решений Big Data и Data Lake.
• Сбор и анализ финансовых показателей.
• Подготовка отчетности для руководства.

Требования:

Опыт в дата инженерии в DWH (Oracle) и Data Lake (Hadoop)

Языки программирования:

• SQL

• Python

• Bash

Что используем из инструментов/технологий:

• Airflow

• Kafka

• Debezium

• PySpark

• Hive

• Flink

Будет плюсом:

• dbt, git

• Знания в области технологий LakeHouse (Apache Iceberg, S3, Trino, Starburst)

• Достойную заработную плата;
• Медицинское страхование, либо компенсацию за фитнес (на выбор), при успешном прохождении испытательного срока;
• Мобильную связь;
• Команду профессионалов, которые заточены на результат;
• Возможность как вертикального, так и горизонтального карьерного роста.