Data Engineer (middle) (удаленная работа)

Вакансия: Data Engineer (middle)

Описание вакансии

Цифровые Привычки аккредитованная IT-компания, резидент Сколково, топ-5 подрядчиков Сбера . Мы предоставляем услуги IT-консалтинга, заказной разработки, аутсорсинга IT-процессов и развиваем собственные продукты и проекты партнеров.
Наша команда это сплоченный коллектив высококвалифицированных профессионалов, способных эффективно решать самые сложные задачи. Нас более 250 человек, распределенных по разным проектам и городам.
Люди самый ценный актив.
Наша команда экспертов объединена общими идеями, ценностями и миссией. Мы делаем свою работу лучше каждый день благодаря общим принципам, которые нами движут.
Мы заботимся о благополучии специалистов: создаем комфортные условия труда, ставим амбициозные задачи и даем возможность поменять проект, если он по каким-то причинам перестал устраивать.
Количество наших проектов растет, как растет и наша команда. Сейчас мы в поиске Data Engineer на проект Сбера.
О проекте: Занимаются созданием АС (автоматизированной системы) по анализу и мониторингу контрактов юридических лиц с микросервисной архитектурой.

Задача - создание рабочего места для автоматизации работы сотрудников кредитного анализа и мониторинга сотрудников мониторинга и поставка алгоритмов на больших данных, интегрируясь с множеством внутренних и внешних источников и автоматизированными системами корпоративных клиентов.

Работают по Scrum с активным привлечением бизнес-аналитиков (Customer Journey Expert) и пользователей из бизнес подразделений.

В команде представлены компетенции: разработчики backend и frontend, системные аналитики, QA инженеры.

Ищем :

Data Engineer, уровень Middle и выше, в команду разработчиков для нового проекта. Основная задача работа по расширению имеющейся витрины данных (ВД) в рамках текущей ИТ-архитектуры, создание новой ВД. Многозадачность, работа в команде основные черты, которыми должен обладать кандидат помимо профессиональных знаний и опыта.

Обязанности:

• Проектирование и разработка аналитических витрин данных для целей отчетности и исследований на стеке Hadoop + Spark + Scala;

• Мониторинг и оптимизация процессов сборки витрин;

• Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными;

• Предоставление экспертной поддержки внутренним потребителям (data analysts, data scientists) по вопросам, связанным с использованием данных;

• Анализ исходных данных в различных системах и форматах для решения бизнес-задач (оценка структуры, качества, полноты и применимости данных);

• Контроль качества загружаемых данных.

Требования:

• Опыт работы в качестве Data Engineer / Data Analyst / ETL Developer от 2 лет;

• Опыт работы с одной из реляционных СУБД - PostgreSQL (текущий техстек) /Oracle/mySQL/MS SQL Server;

• Знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности);

• Знание архитектуры МРР СУБД (Hadoop, Greenplum), опыт практической работы c MPP СУБД;

• Опыт промышленной разработки на стеке Scala/Python;

• Опыт работы с большими объемами данных с использованием стека технологий Big Data (Hadoop, Spark, GreenPlum);

• Знание основных понятий и концепций из области Data Warehouse;

• Практический опыт разработки витрин данных с использованием инструментов Apache Spark, Kafka, Hadoop (Hive / Oozie).

Будет плюсом:

• Знание методологии Agile и опыт работы в Scrum-команде будет плюсом;

• Опыт работы с чужим кодом;

• Знание корпоративного банковского бизнеса является преимуществом.

Условия:

• Достойная заработная плата
• Трудоустройство по ТК, ИП, ГПХ, СЗ.
• Формат работы удаленный/гибридный/офис - на выбор.
• Реальный рост внутри компании, регулярный пересмотр зарплаты по результатам работы.
• Обучение в образовательном центре HeadBridge на базе компании.
• Возможность изучения английского языка.
• Доход обсуждаем с каждым кандидатом индивидуально (все зависит от вашего уровня знаний)
• ДМС.