Вакансия: Data Engineer (Middle)
Описание вакансии
М.ТЕХ - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ М.ВИДЕО-ЭЛЬДОРАДО разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России.
Команда "Коммерция" ищет Data Engineer для работы в хабе между продуктами кластера и внешними системами (ценообразование, промо-планирование, прогноз спроса, ведение ассортимента и тд). Извлекаем и доставляем данные, делаем дашборды, создаем DataLake
СТЕК : PostgreSQL, Greenplum, Clickhouse, Spark, Python, SQL, Airflow, Iceberg, Kafka, Trino, Superset, Tableau, SAP BW/ERP.
ТЕБЕ ПРЕДСТОИТ:
- поддержка и создание интеграций и витрин в рамках хранилища данных;
- построение ETL-процессов;
- подключение новых источников в хранилище данных по стандартизированному процессу;
- создание механизмов проверки качества данных;
- документирование результатов разработки;
- осуществление поддержки имеющихся процессов;
- разбор legacy и перенос на новые инструменты.
ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:
- знание концепций работы с git и CI/CD процессами;
- знание SQL (временные таблицы, оконные функции, cte и тд), опыт оптимизации запросов;
- знания принципов работы БД, построения ХД, опыт работы с Greenplum;
- опыт разработки ETL процессов (Spark);
- опыт работы с табличными форматами хранения (Trino, Iceberg, S3).
ЧТО ТЫ ПОЛУЧИШЬ:
- Продукты, признанные на рынке (несколько премий за Лучший Интранет, хит-парад премий за лучшее ИТ-решение в ритейле) и имеющие амбициозные планы на развитие;
- Конструктивный диалог и возможность внедрять свои идеи, если они способствуют достижению общего результата;
- Команду увлеченных профессионалов, которая открыта к поиску нового;
- Конкурентную заработную плату, гибкое отношение к рабочему месту (посещение офиса в Москве на гибриде в Сколково, БЦ Орбион, но ты можешь работать удаленно в пределах РФ);
- ДМС со стоматологией.