Data Engineer (Ведущий инженер систем больших данных) (удаленная работа)

27 июня 2025

Уровень зарплаты:
з.п. не указана
Требуемый опыт работы:
Не указан

Вакансия: Data Engineer (Ведущий инженер систем больших данных)

Описание вакансии

X5 Group российская розничная торговая компания, управляющая продуктовыми торговыми сетями Пятёрочка , Перекрёсток и Чижик , а также цифровыми сервисами Vprok. ru Перекрёсток , 5Post, Много Лосося и медиаплатформой Food. ru .

X5 Tech - IT-компания и основной цифровой партнер торговых сетей и бизнесов X5 Group. Команда из более 5000 специалистов разрабатывает решения, которые помогают 372 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей быстро и удобно покупать свежие продукты.

Стек: Python, SQL, Spark/Hadoop, Airflow.

Обязанности:

  • Написание пайплайнов по работе с данными с использованием Airflow, Spark (пример: регулярный расчет фичей для модели, построение витрин с данными. их обновление, расчет метрик качества данных для мониторинга);
  • Оптимизация расчета фичей для модели для выдерживания SLA при масштабировании продукта под большее количество магазинов;
  • Настройка мониторинга и алертинга качества данных и фичей с использованием Zabbix, Grafana;
  • Написание unit тестов (pytest), тестов для различных участков ML пайплайна, участие в код ревью;
  • Не обязательно, но будет большим плюсом: опыт работы с ML, выведения ML моделей в продакшн.
Требования:
  • Опыт в применении основных подходов к распределенной обработке больших данных (MapReduce, MPP, etc);
  • Опыт в применении основных подходов и практик проектированию OLAP баз данных;
  • Знание основных подходов и практик проектированию реляционных баз данных;
  • Знание языков программирования Python (Java, Scala);
  • Знание SQL;
  • Знание основных рабочих инструментов: Hadoop, Hive, Spark, Airflow, PostgreSQL, Git, Docker Знание Greenplum, Clickhouse;
  • Знание Kafka;
  • Знание K8S.

Условия:

  • Официальное оформление с белой ЗП, ежеквартальные премии по результатам работы;
  • Удобный офис рядом с м. Добрынинская / удобный офис с бесплатной парковкой на м. Волгоградский проспект / МЦД Калитники ;
  • Гибкий график работы;
  • Возможность работать удалённо или в гибридном формате;
  • Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья;
  • Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет X5 Полка , школа наставников и многое другое;
  • Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов;
  • Обмен опытом через cообщества: 12 технических комьюнити от java до devops;
  • Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge;
  • Забота о благополучии сотрудников: 7 спортивных сообществ (бег, футбол, волейбол, баскетбол, хоккей, лыжи, триатлон), ежегодная Неделя здоровья;
  • Скидки в экосистеме бизнесов Х5 ( Пятёрочка , Перекрёсток , Много лосося , Перекресток Впрок );
  • Программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров);
  • Материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию.

Присоединяйся к команде X5 Tech, чтобы создавать будущее ритейла вместе с нами!



Посмотрите похожие вакансии

Data Engineer Senior
Компания: Бюро кредитных историй Скоринг Бюро
Зарплата: з.п. не указана
Data Engineer, Data Scientist (преподаватель дисциплины Apache Spark)
Компания: IBS
Зарплата: з.п. не указана
Lead Data Engineer / Инженер по данным
Компания: Ростелеком
Зарплата: з.п. не указана
Senior Data Analyst (Фудтех)
Компания: БУРГЕР КИНГ
Зарплата: з.п. не указана