Data engineer

Мы «Деметра-Холдинг» – крупнейший в России вертикально интегрированный инфраструктурный холдинг, объединяющий активы в области экспортной логистики и трейдинга. Компания развивает собственную сеть элеваторов, владеет глубоководными морскими зерновыми терминалами и логистической инфраструктурой.

Сейчас мы укрепляем нашу команду и находимся в поиске "Data engineer/DWH developer/Инженер данных».

Задачи:

• Разработка компонентов целевого корпоративного хранилища данных (Postgres, MS SQL, ClickHouse);
• Загрузка данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы) в единое хранилище (SQL/Python);
• Создание SQL витрин и процедур;
• Автоматизация проверок качества данных;
• Формирование системы контроля и мониторинга целостности и качества данных;
• Подготовка и поддержание в актуальном состоянии каталога метаданных;
• Code review.

• Высшее образование (техническое, математическое, экономическое);
• Понимание принципов проектирования архитектуры хранилищ данных DWH (Data vault/Inmon/Kimball);
• Опыт проектирование и разработки хранилищ данных от 2 лет;
• Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 1 года;
• Уверенное знание SQL, опыт разработки сложных запросов и процедур в (MS SQL, Postgres ClickHouse - преимущество) от 2 лет;
• Автономность, навыки самостоятельного поиска технических решений.

Желательно:

• Git, CI/CD
• Опыт работы по Agile
• Kafka, Clickhouse, Greenplum
• Linux.

Возможность реализовать ключевые проекты для компании.

• Оформление строго по ТК РФ;
• Конкурентоспособная з/п + годовой бонус;
• Гибридный или удаленный график работы (зависит от места проживания);
• ДМС и другие льготы от компании.