Вакансия: Ведущий инженер данных / Data engineer (Senior)
Описание вакансии
М.ТЕХ - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ М.ВИДЕО-ЭЛЬДОРАДО разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России.
МЫ В ПОИСКЕ ВЕДУЩЕГО ИНЖЕНЕРА ДАННЫХ
Мы относимся к платформе данных кластера Коммерция, извлекаем и доставляем данные, делаем дашборды, создаем DataLake.
Стек команды: PostgreSQL, Greenplum, Clickhouse, Spark, Python, SQL, Airflow, Iceberg, Kafka, Trino, Superset, Tableau, SAP BW/ERP, Docker, Ci/Cd.
ТЕБЕ ПРЕДСТОИТ:
- поддержка и создание интеграций и витрин в рамках хранилища данных;
- построение ETL-процессов;
- подключение новых источников в хранилище данных по стандартизированному процессу;
- создание механизмов проверки качества данных;
- документирование результатов разработки;
- осуществление поддержки имеющихся процессов;
- разбор legacy и перенос на новые инструменты.
ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:
- знание концепций работы с git и CI/CD процессами;
- знание SQL (временные таблицы, оконные функции, cte и тд), опыт оптимизации запросов;
- знания принципов работы БД, построения ХД, опыт работы с Greenplum;
- опыт разработки ETL процессов (обязательно: Spark);
- опыт работы с табличными форматами хранения (Желательно: Trino, Iceberg, S3).
ЧТО ТЫ ПОЛУЧИШЬ:
- Продукты, признанные на рынке (несколько премий за Лучший Интранет, хит-парад премий за лучшее ИТ-решение в ритейле) и имеющие амбициозные планы на развитие;
- Конструктивный диалог и возможность внедрять свои идеи, если они способствуют достижению общего результата;
- Команду увлеченных профессионалов, которая открыта к поиску нового;
- Конкурентную заработную плату, гибкое отношение к рабочему месту (посещение офиса в Москве на гибриде в Сколково, БЦ Орбион, но ты можешь работать удаленно в пределах РФ);
- ДМС со стоматологией.
