Data engineer (удаленная работа)

Вакансия: Data engineer

Описание вакансии

Мы создаём высоконагруженный сервисный сайт, который занимает 3 место в мире по рейтингу SimilarWeb среди сайтов по поиску работы. Ежедневно к нам приходят около полутора миллионов пользователей, смотрят более 100 миллионов страниц (до 10000 в секунду), и делают около 1 миллиона откликов на вакансии. Мы хотим знать о всех действиях пользователя и понимать их поведение. Поэтому внедряем различные инструменты для сбора и анализа данных, и сейчас ищем человека, который будет развивать наше Data-направление.

Стек :

Ванильный Apache Hadoop последней версии Apache Airflow как основной оркестратор Apache Kafka для доставки данных, Flink для их обработки Spark 3 Hive 3 Trino

Задачи:

• реализация задач от аналитиков;
• организация обмена данными между системами;
• поиск и устранение багов;
• консультирование аналитиков и пользователей решения.

Необходимые знания и компетенции:

• Владение SQL и умение писать скрипты;
• Базовое знание Python;
• Опыт работы с BigData;
• Желание осваивать новые технологии;
• Понимание важности документации;

Будет плюсом:

• опыт работы с Airflow;
• опыт моделирование данных.

Что мы предлагаем:

• Возможность удаленной работы;

• Корпоративное ДМС (со стоматологией) с первого месяца работы; страхование жизни;

• Обучение за счет компании, участие в специализированных конференциях;

• Работу в ИТ-компании с аккредитацией в Минцифры;

• Корпоративный сервис с круглосуточной поддержкой юриста, психолога и финансового консультанта;

• Промокоды и бонусы от партнеров.