Big Data Developer
От 3 до 6 лет
Полная занятость
Удаленная работа
Описание вакансии
Команда Data Platform занимается всей инфраструктурой для работы с данными в ОК. Наша платформа построена как на проверенных решениях с открытым исходным кодом (Hadoop, Kafka, Spark, Zeppelin и не только), так и на решениях собственной разработки, заточенных под работу 24/7 в условиях высоких нагрузок. Мы ищем человека, который поможет развивать эту платформу, внедряя новые решения и дорабатывая существующие.
Особенности:
- big data: 3 hdfs-кластера общим объёмом ~200PB;
- high load: обслуживаем десятки тысяч серверов;
- high available: все серверы расположены в 6 разных дата-центрах;
- не enterprise: разрабатываем решения, которые сами же и используем;
- stack: Hadoop-3.1.x, Kafka-2.4.x, Spark-3+, ClickHouse, Airflow;
- lang: Java, Scala, Python, Bash.
Задачи:
- развитие платформы хранения и обработки больших данных OK;
- развитие аналитической инфраструктуры на базе One-Cloud для OK и других команд VK;
- миграция данных в единое хранилище в рамках холдинга.
Требования:
- хорошее знание Java/Scala;
- опыт работы и понимание внутреннего устройства: Hadoop, Spark, Airflow;
- будет плюсом опыт работы с Apache Kafka, ClickHouse.
Условия работы:
- оформление по ТК с первого рабочего дня;
- конкурентоспособная/достойная заработная плата по итогам собеседования с успешными кандидатами;
- удалёнка;
- полная медицинская страховка с первого рабочего дня, включающая стоматологию и плановую госпитализацию;
- внутренние семинары и мастер-классы, возможность проходить внешние тренинговые программы;
- работа с ведущими специалистами рунета с опытом запуска крупнейших интернет-проектов.
Ключевые навыки
Вакансия опубликована:
сегодня,
Москва
Похожие вакансии
Что говорят сотрудники
Все 129 отзывов по этой специальности
Frontend-разработчик
Москва,
октябрь 2024
Что нравится
Можно покушать печеньки. Поиграть в плейстейшн. Есть спорт зал с настольным футболом.
Что можно улучшить
Уровень зп. Рабочие процессы. Техническую базу. Менеджмент. Скорость принятия решений.
Golang-разработчик
Москва,
сентябрь 2024
Что нравится
Масштаб - участвуешь в разработке того, что знает вся страна.
Что можно улучшить
В финансовых отчетах много говорят сколько заработали, но молчат сколько упустили. Расхлебать технический долг нужно, чтобы работа была в радость и всё делалось в разы быстрее.
PHP-программист
Москва,
сентябрь 2024
Что нравится
крутая команда, хорошо выстроенные процессы, социальный пакет
Что можно улучшить
упростить процедуру перфоманс-ревью, добавить компенсацию питания на удаленке )
Оценки по категориям
Преимущества и льготы компании
Сотрудники чаще всего указывали следующие льготы и преимущества на основании 862 отзывов
92%
Своевременная оплата труда
82%
Удаленная работа
80%
Медицинское страхование
76%
Наличие кухни, места для обеда
74%
Оплата больничного
68%
Корпоративные мероприятия
66%
Гибкий рабочий график
57%
Удобное расположение работы
51%
Профессиональное обучение
48%
Место для парковки
44%
Система наставничества
43%
Компенсация питания
7%
Оплата транспортных расходов
6%
Корпоративный транспорт
5%
Оплата мобильной связи