Data Engineer

Наш партнер - крупная FMCG компания открывает позицию Data Engineer

Предстоящие задачи:

• Разрабатывать витрины данных в рамках проекта RC Data Lake;
• Интегрировать источники данных в RC Data Lake на платформе Yandex Cloud;
• Обрабатывать потоковые данные (streaming);
• Контролировать качество загружаемых данных;
• Проводить код ревю;
• Отвечать за оптимизацию, рефакторинг и поддержку решений;

Требования:

• Опыт от 3-х лет в роли Data Engineer;
• Отличное знание SQL, python, PySpark/Scala;
• 2+ года опыта работы с облачными платформами Yandex Cloud Platform/ Azure/ AWS;
• Опыт работы в проектах с использованием

·

• • Kafka, CDC-решений
  • S3, Airflow, Apache Spark, Clickhouse, Postgres

• Опыт работы с Docker, Kubernetes;
• Понимание работы CI/CD процессов;
• Знание Git;
• Опыт работы с GitLab;
• Английский на уровне не ниже intermediate;

Мы ждем что вы:

• Понимаете основные структуры данных
• Понимаете ETL процессы
• Разбираетесь в современных хранилищах данных
• Умеете разбираться в новых инструментах и фреймворках, а также в их работе под капотом.
• Умеете работать самостоятельно и в команде

Мы предлагаем:

• Оформление по ТК
• Конкурентная заработная плата (финансовые условия обсуждаются с успешным кандидатом)
• ДМС
• Полностью удаленный формат работы