Вакансия: Data engineer
Описание вакансии
Мы создаём высоконагруженный сервисный сайт, который занимает 3 место в мире по рейтингу SimilarWeb среди сайтов по поиску работы. Ежедневно к нам приходят около полутора миллионов пользователей, смотрят более 100 миллионов страниц (до 10000 в секунду), и делают около 1 миллиона откликов на вакансии. Мы хотим знать о всех действиях пользователя и понимать их поведение. Поэтому внедряем различные инструменты для сбора и анализа данных, и сейчас ищем человека, который будет развивать наше Data-направление.
Стек :
Ванильный Apache Hadoop последней версии Apache Airflow как основной оркестратор Apache Kafka для доставки данных, Flink для их обработки Spark 3 Hive 3 Trino
Задачи:
- реализация задач от аналитиков;
- организация обмена данными между системами;
- поиск и устранение багов;
- консультирование аналитиков и пользователей решения.
Необходимые знания и компетенции:
- Владение SQL и умение писать скрипты;
- Базовое знание Python;
- Опыт работы с BigData;
- Желание осваивать новые технологии;
- Понимание важности документации;
Будет плюсом:
- опыт работы с Airflow;
- опыт моделирование данных.
Что мы предлагаем:
-
Возможность удаленной работы;
-
Корпоративное ДМС (со стоматологией) с первого месяца работы; страхование жизни;
-
Обучение за счет компании, участие в специализированных конференциях;
-
Работу в ИТ-компании с аккредитацией в Минцифры;
-
Корпоративный сервис с круглосуточной поддержкой юриста, психолога и финансового консультанта;
-
Промокоды и бонусы от партнеров.
