Data Engineer (удаленная работа)

Вакансия: Data Engineer

Описание вакансии

Привет!) Мы Aero e-commerce разработчик 1 в России. Делаем онлайн-шопинг простым и приятным, а магазины надежными и безопасными.Нам доверяют М.Видео, Мегафон, Декатлон, IKEA, Глория Джинс, Лента, Hoff и др.

В команду к молодым и дружным разыскивается молодой и дружный)

Тебе предстоит:

• Автоматизировать дата-пайплайны;
• Участвовать в построении хранилищ данных: проектирование, определение сущностей, формирование витрин данных;
• Разрабатывать и оптимизировать процессы выгрузки данных из различных источников;
• Разрабатывать процессы обработки данных;
• Проводить оркестрацию ETL/ELT процессов в Airflow;
• Поддерживать аналитическую инфраструктуру.

Наша совместная работа точно будет продуктивной, если у тебя есть:

• плотный опыт работы с Greenplum, Python, Spark;
• K8s на уровне понимания.
• Kafka практический опыт работы.
• Понимание концепта CDC (change data capture).
• Понимание/представление, каким образом можно создать динамический генератор дагов или dag factory.
• Практический опыт работы с потоковой обработкой данных (streaming/real-time) и с пакетной обработкой данных (batch).
• Знание и понимание особенностей моделей данных (например, data vault).

Не обязательно, но будет очень круто:

• Опыт работы с ClickHouse.

Что предлагаем:

Мы готовы гибко обсуждать любые условия. Будем исходить из ожиданий успешного кандидата. Базовый пакет включает:

• Команда, открытая твоим идеям, свобода действий и доступ к ресурсам;
• Клиенты, чей опыт и продукт драйвит;
• Гибридный или удаленный формат работы, свободное начало дня (м. Достоевская). Старательно создаем из офиса третье место, культурное пространство, куда стягиваются люди;
• ДМС, компенсация на изучения английского языка и внешнего обучения, винишко в твоем бокале)