Senior data engineer / DWH architect (удаленная работа)

Вакансия: Senior data engineer / DWH architect

Описание вакансии

О компании: крупнейший в России инфраструктурный холдинг, объединяющий активы в области экспортной логистики и торговли зерном. Компания развивает собственную сеть элеваторов, владеет глубоководными морскими зерновыми терминалами и логистической инфраструктурой.

О проекте: разработка хранилища данных и разработка BI, как в управляющей компании, так и в дочерних предприятиях. В команде офиса данных сейчас работают 8 специалистов. Текущий этап проекта - становление: сбор и консолидация данных.

Причина появление вакансии: расширение штата и активный рост бизнеса

Задачи:

• Проектирование целевой архитектуры платформы данных;
• Разработка и внедрение компонентов платформы данных;
• Организация загрузки данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы);
• Создание SQL витрин и процедур;
• Формирование системы контроля и мониторинга целостности и качества данных;
• Подготовка и поддержание в актуальном состоянии каталога метаданных;
• Выстраивание процесса CI/CD совместно с DevOps;
• Code review и наставничество команды DE.

Требования:

• Глубокое понимание принципов проектирования архитектуры хранилищ данных DWH ( Data vault /Inmon/Kimball);
• Опыт проектирование и разработки хранилищ данных от 5 лет. В роли Team lead от 1 года;
• Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 2 лет ;
• Уверенное знание SQL, опыт разработки сложных запросов и процедур в ( MS SQL, Postgres - преимущество) от 5 лет ;
• Опыт выстраивания CI/CD (DataOps);
• Опыт внедрения Kafka, RabbitMQ, dbt, Airflow, Greenplum/Clickhouse сильное преимущество;
• Linux;
• Автономность, навыки самостоятельного поиска технических решений.

Условия:

• Возможность реализовать ключевые проекты для компании.
• Соблюдение трудового кодекса РФ оформление только в штат компании
• Удаленная работа или гибрид/офис в Москве
• Работа в аккредитованной ИТ-компании
• Годовой бонус выплачивается 1 раз в год в зависимости от результатов работы ( 3-4 оклада )
• Индексация зарплат в ИТ-отделе 2 раза в год
• ДМС со стоматологией с первого рабочего дня
• Оплата питания в офисе в Москве.
• Частичное финансирование фитнеса в Москве
• Обучение за счет компании включается в индивидуальный план развития в учебных центрах по выбору сотрудника.
• Возможность карьерного развития в стабильно растущем и крупнейшем экспортере России
• Современный стек и возможность строить новую платформу + профессиональное развитие + дружная команда и комфортная среда