Data Engineer (разработчик DWH со знанием flink) (удаленная работа)

Вакансия: Data Engineer (разработчик DWH со знанием flink)

Описание вакансии

X5 Group российская розничная торговая компания, управляющая продуктовыми торговыми сетями Пятёрочка , Перекрёсток и Чижик , а также цифровыми сервисами Vprok.ru Перекрёсток , 5Post, Много Лосося и медиаплатформой Food.ru.

X5 Tech - IT-компания и основной цифровой партнер торговых сетей и бизнесов X5 Group. Команда из более 4000 специалистов разрабатывает решения, которые помогают 372 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей быстро и удобно покупать свежие продукты.

В X5 Технологии открыта позиция "Инженер обработки данных" со знанием flink

Проектирование платформы потоковой обработки данных
Наш стек: Trino, Apache Airflow, ClickHouse, Python, Spark, SQL, S3, flink

Основные задачи:

• Проектирование, разработка и сопровождение стриминговых/батчевых пайплайнов
• Реализация бизнес логики и трансформаций во Flink / Spark / Java в режиме стрима
• Инкрементальная загрузка и выкладка витрин (dbt / Trino / Iceberg)
• Проектирование хранения и партиционирования в data lake (колоночные форматы, снапшоты, Iceberg)
• Построение надёжных схем доставки данных: семантики доставки, идемпотентность, обработка дупликатов
• Документирование архитектуры пайплайнов и участие в принятии архитектурных решений по платформе.

Что для нас важно:

• Технические навыки: Spark, Flink, ClickHouse, Kafka
• Понимание форматов и концепций data lake (Iceberg, Parquet/ORC, снапшоты, инкременты)
• Умение мыслить потоками данных: от события до витрины, а не только запросами
• Опыт работы с дашбордами/витринами через Trino/SQL/dbt будет плюсом
• Софт скиллы: системное мышление, инициативность, готовность обсуждать архитектуру и учиться новым паттернам.

Что мы предлагаем:

• Официальное оформление с белой ЗП
• Полугодовые премии по результатам работы
• Возможность работать удалённо или в гибридном формате
• Удобный офис рядом с м. Добрынинская / офис с бесплатной парковкой на м. Волгоградский проспект или МЦД Калитники
• Гибкий график начала работы
• Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья
• Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет X5 Полка , школа наставников и многое другое
• Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов
• Обмен опытом через cообщества: 12 технических комьюнити от java до devops
• Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge
• Забота о благополучии сотрудников: 7 спортивных сообществ (бег, футбол, волейбол, баскетбол, хоккей, лыжи, триатлон), ежегодная Неделя здоровья
• Скидки в экосистеме бизнесов Х5 ( Пятёрочка , Перекрёсток , Много лосося , Перекресток Впрок )
• Программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров)
• Материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию.