Вакансия: Data Engineer/Инженер больших данных (Big data)
Описание вакансии
«ЛЕНТА» – федеральная розничная сеть, занимающая первое место в России по количеству гипермаркетов. Наши информационные системы перерабатывают огромные объемы информации от движения автотранспорта до покупки товара покупателем.
Ищем Data-инженера для работы с большими объемами данных, open source решениями и сложными задачами.
Используем: Spark, S3, k8s, Docker, Gitlab, Postgres/Greenplum/Clickhouse, Hadoop, Kafka, Airflow, открыты к новым технологиям.
Вам предстоит:
- разработка архитектуры доставки, хранения и обработки данных
- разработка и поддержка автоматизированных регулярных ETL процессов
- организация хранения данных с использованием инфраструктуры S3/Hadoop
- оптимизация хранимых данных
Какие навыки нужны:
- опыт работы в big data
- опыт программирования от 2-х лет на SQL, Python (java/scala тоже можно)
- знание инструментов ETL и CDC
- опыт работы с Hadoop будет преимуществом
Тебя ждет:
- активное участие в реализации значимых Big data проектов в одной из лидирующих розничных сетей
- возможность самостоятельно принимать решения по архитектуре и стеку
- дружный коллектив профессионалов
А также:
- ДМС класса Люкс со стоматологией
- оформление по ТК РФ, полный спектр социальных льгот (ИТ-компания)
- скидка на занятия с репетитором по английскому языку
- скидки на фитнес, возможность заниматься корпоративным спортом (футбол, волейбол)
- программа личного развития, включающая внешнее и внутреннее обучение
возможность работать удаленно до 100% времени
годовое премирование на основании результатов оценки деятельности