Младший разработчик / Data Engineer / Инженер Данных (удаленная работа)
(вакансия в архиве)

Вакансия: Младший разработчик / Data Engineer / Инженер Данных

Описание вакансии

Приветствуем тебя, будущий участник нашей прогрессивной команды! Мы аккредитованная IT-компания "Платформа больших данных" разрабатываем IT-продукты для бизнеса на основе big data. Наша компания объединила данные и компетенции крупнейших игроков рынка, ВТБ, Ростелекома и множества других партнеров. Мы создали 9 уникальных IT-продуктов для бизнеса на основе bid data по различным направлениям: финансовые сервисы, геоаналитика и рекламные направления.

Сейчас мы в поисках младшего дата-инженера на IT-продукт, связанный с данными о телесмотрении, интернет-логах и данных о покупках для каждого уникального пользователя, а также аналитические отчеты об успешности рекламных ТВ-кампаний, что помогает заказчику эффективнее планировать рекламный бюджет. У нас очень большой объем данных и большой простор для работы с ними.

Наши преимущества:

- Работа в одной из высокотехнологичных аккредитованных российских IT-компаний

- Резидент Сколково

- Работу с отличной командой настоящих профессионалов (в компании более 100 человек)

- Полис ДМС со стоматологией

- Скидки на изучение английского, сессии психолога

- Гибкое начало дня

- Можно работать полностью удаленно в РФ либо гибридно (по вашему усмотрению)

- Официальное оформление с 1-ого рабочего дня

- Баланс жизни и работы, отличная команда

- Мероприятия для поддержания хорошего настроения (корпоративы, презентации новых IT-продуктов, сюрпризы)

- Современное оборудование для работы

Необходимые навыки:

Отличное знание Python

Знание основ работы с командной строкой и базовых утилит Linux ;

Опыт работы с git ;

Знание SQL ;

Опыт работы с Airflow ;

Понимание и интерес к области больших данных;

Понимание и интерес к data science решениям и ML;

Будет плюсом:

Опыт работы c Spark , Hadoop , Hive

Опыт проектирования высоконагруженных систем

Знание http/https, dns и предметной области работы операторов (кликстрим, система сбора логов)

Опыт работы с ClickHouse в продуктовых задачах и понимание его преимуществ

Опыт работы с NiFi

Опыт настройки CI/CD в gitlab или в других системах

Опыт в DevOps / Тестировании

Твоими задачами станут:

Сбор информации по источникам данных и их структуре;

Автоматизация аналитических отчётов;

Интеграция систем обмена данными с различными источниками;

Реализация витрин данных на pyspark;

Разработка и оптимизация ETL пайплайнов;

Refactoring, code review;

Разработка архитектуры решений по загрузке данных в кластер .

Будем рады видеть тебя в нашей дружной команде профессионалов!