Data Engineer / Дата-инженер (удаленная работа)
(вакансия не опубликована)

Вакансия: Data Engineer / Дата-инженер

Описание вакансии

Основные задачи:

• Участие в разработке и поддержании высоконагруженного сервиса (python, FastAPI);
• Разработка и оптимизация ETL пайплайнов с помощью Spark и Airflow по сбору, обработке, хранению и выгрузке данных;
• Построение витрин данных для аналитических отчетов на HDFS;
• Организация эффективного хранения логов, настройка мониторинга и алертинга;
• Подготовка и поддержание актуальной технической документации;
• Взаимодействие с бизнес-заказчиками, дата-аналитиками и DevOps

Требования:

• Отличное знание Python;
• Опыт работы с Hadoop/Spark , понимание принципов работы распределенных вычислений ;
• Знание SQL , понимание принципов работы реляционных БД ( Postgres ) ;
• Знание основ работы с командной строкой и базовых утилит Linux ;
• Опыт работы с git ;
• Опыт работы с Airflow ;
• Понимание и интерес к области больших данных;

Будет плюсом:

• Опыт backend разработки ( FastAPI )
• Опыт frontend разработки ( javascript )
• Опыт работы с нереляционными БД ( Redis )
• Опыт работы c Kafka
• Опыт работы с системами мониторинга ( Prometheus, Grafana )
• Опыт работы с высоконагруженными системами
• Знание http/https, dns и предметной области работы операторов (кликстрим, система сбора логов)
• Понимание работы рекламных технологий, RTB-аукциона
• Опыт в DevOps / Тестировании
• Знание Scala

Что мы предлагаем:

• интересные рабочие задачи и возможность профессионального развития;
• классное рабочее место в самом сердце Москвы. Но возможен и гибридный формат работы;
• ДМС после испытательного срока;
• нормированный рабочий день с 9 до 18.

Присоединяйся к нам и стань частью команды, которая меняет будущее с помощью данных!