Инженер данных (удаленная работа)

Вакансия: Инженер данных

Описание вакансии

М.ТЕХ - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ М.ВИДЕО-ЭЛЬДОРАДО

КОМАНДА М.ТЕХ разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России.

ПРО ПРОДУКТ: Мы разрабатываем и поддерживаем инфраструктуру обработки данных: проводим миграцию с текущего стека (Greenplum + ClickHouse) на современный (Trino + Iceberg), оптимизируем ETL процессы, обеспечиваем надёжность и производительность pipeline.D

С НАМИ ТЫ БУДЕШЬ:

• Поддерживать и оптимизировать текущие ETL процессы на базе Greenplum и ClickHouse;
• Проектировать и реализовывать миграцию данных и запросов с Greenplum на Trino, с ClickHouse на Iceberg. Участвовать в проектировании Data Lake/Data Warehouse на основе Iceberg;
• Разрабатывать и поддерживать пайплайны обработки данных (Airflow);
• Оптимизировать запросы и схемы хранения для Trino/Iceberg/ClickHouse;
• Обеспечивать качество данных и автоматизировать рутинные операции;
• Вести документацию.

ДЛЯ НАС ЦЕННО:

• Опыт работы в роли Data Engineer от 2 лет;
• Продвинутый уровень владения SQL: сложные запросы, оптимизация, работа с партициями, индексами;
• Уверенный опыт работы со Spark;
• Опыт работы c Kafka;
• Уверенное владение Python(обработка данных, скрипты, API);
• Опыт работы с Trino/Iceberg/ClickHouse/Greenplum;

БУДЕТ ПРЕИМУЩЕСТВОМ:

• Опыт работы с Flink (для расширенной обработки);
• Понимание data governance и data quality практик;
• Опыт миграции данных между СУБД/форматами (например, Greenplum Trino, ClickHouse Iceberg);

КОГДА ТЫ С НАМИ:

• Работаешь с продуктами, признанными на рынке (несколько премий за Лучший Интранет, хит-парад премий за лучшее ИТ-решение в ритейле) и имеющими амбициозные планы на развитие;
• Имеешь конструктивный диалог и возможность внедрять свои идеи, если они способствуют достижению общего результата;
• Становишься частью команды увлеченных профессионалов, которая открыта к поиску нового;
• Получаешь конкурентную заработную плату, гибкое отношение к рабочему месту (посещение офиса в Инновационном центре Сколково на гибриде, но ты можешь работать удаленно по РФ);

• Получаешь скидки и специальные предложения компаний-партнёров;

• Получаешь подписку М.Комбо пакет привилегий: ежемесячные бонусные рубли, бесплатная доставка, скидки на установку/ремонт, приоритетную поддержку.

• Получаешь ДМС со стоматологией.