Data Engineer (удаленная работа)

Вакансия: Data Engineer

Описание вакансии

Мы букмекерская компания PARI. Мы создаем все условия для того, чтобы любители спорта могли наслаждаться просмотром спортивных событий и заключать пари.

PARI обладает внушительным спонсорским портфолио в самых популярных видах спорта и сотрудничает с ведущими российскими федерациями Союз биатлонистов России, Всероссийская федерация волейбола; футбольными клубами: ПАРИ НН , Торпедо , Ахмат , любительский футбольный клуб Амкал ; хоккейными клубами: Торпедо , Северсталь , Нефтехимик , Адмирал и Витязь .

В нашей команде амбассадоров известные телеведущие Дмитрий Губерниев, Ольга Петрикова, популярные российские ММА-бойцы Петр Ян и Арман Царукян, а также легенда российского футбола Андрей Тихонов и главный регбист страны Василий Артемьев.

Команда PARI растёт, в связи с этим у нас открыта позиция в Data engineer, который будет отвечать за разработку и оптимизацию конвейеров обработки данных. Можно работать из любой точки мира.

Вашей основной задачей будет проектирование, внедрение и расширение пайплайнов данных для предварительной обработки, очистки и проверки. Вы будете работать в тесном сотрудничестве с несколькими командами для предоставления данных внутри подразделений и вывода продуктовых решений Data команды в прод.

Стек:

• SQL (Greenplum, Clickhouse, PostgreSQL)
• Python+Airflow как основной инструмент для разработки ETL-процессов;
• Docker

Чем предстоит заниматься:

• Вывод в прод продуктовых решений Data команды
• Проектировать, внедрять и постоянно расширять пайплайны данных, выполняя предварительную обработку, очистку и проверку;
• Определение возможностей для автоматизации и улучшения существующих процессов обработки данных, приносящих эффект бизнесу;
• Разработка конвейеров данных ETL / ELT, которые легко поддерживать и контролировать;
• Эффективная работа с несколькими командами для предоставления данный внутрь подразделений.

Что ожидаем:

• Опыт работы с данными от 2 лет;

• Связка Airflow + Git для организации и автоматизации ETL/ELT процессов;

• Свободное владение Python как основным языком программирования;

• Возможность писать сложный SQL для обработки сырых данных, преобразования и проверки;

• Опыт работы с API для сбора или приема данных в пакетном или реальном времени;

• Опыт работы с Docker для контейнеризации приложений.

• Опыт работы с облачными решениями, особенно с учетом планируемого перехода на облако;

• Будет плюсом опыт выкатки в прод Machine learning DE, подразумевающим вывод DS моделей в прод.