Разработчик Big Data / Scala (Middle / Senior) (удаленная работа)

Вакансия: Разработчик Big Data / Scala (Middle / Senior)

Описание вакансии

Наш Департамент аналитических решений (ДАР) погружен во все современные направления в области работы с данными: внедрение BI-систем и систем аналитической отчетности; проектирование хранилищ и витрин данных; разработка в области продвинутой аналитики и больших данных; применение прикладных продуктов с использованием Machine Learning; внедрение решений в области управлениям данными (Data Governance, Data Quality); разработка методологии и стратегии работы с данными.

С нами ты будешь работать над самыми крупными проектами, изменяющими весь технологический ландшафт наших заказчиков - на рынке единицы проектов подобного уровня. Мы всеми силами стараемся сочетать сложные многоуровневые архитектуры и высокую экспертизу всех участников с дружественным форматом построения команды. И это отлично получается!

О проекте: перед нами стоит задача трансформировать аналитический ландшафт у нашего заказчика (банковская сфера), а именно объединить 4 отдельно функционирующих хранилища данных в Единую платформу данных на базе новых технологий (Arenadata DB и Arenadata Hadoop).

У нас есть несколько стримов, которые взяли на себя различные задачи в этом направлении. Одна из команд занимается репликацией данных из внешних источников в Data Lake, стек: Spark, Scala, Python, Airflow как оркестратор.

Мы наращиваем команду и находимся в поиске Hadoop/Big Data Разработчика .

Что нужно делать:

• Разработка хранимых процедур, агрегатов, ETL процессов в экосистеме Hadoop.
• Разработка комплексных систем интеграции витрин данных Hadoop с использованием Scala + Spark + AirFlow.
• Согласование требований и подходов к реализации витрин.
• Участие в разработке архитектурных и технических стандартов.

Чего ждем:

• Опыт работы в роли разработчика на стеке Hadoop от 2-х лет.
• Опыт разработки приложений с использованием инструментария экосистемы Hadoop (Spark SQL, Kafka, Hive, Hue и т.д.) от 2-х лет .
• Опыт коммерческой разработки на Scala от 1 года.

Также будет здорово, если есть:

• Опыт участия в проектах построения систем класс Big Data/Data Lake.
• Знания типовых ETL инструментов (Informatica PC /Apache Nifi etc).
• Знание банковской специфики и продуктов среднего и малого бизнеса.

Что можем предложить:

• Официальное оформление в штат компании.

• Заработная плата обсуждается по итогам тех. собеседования. Знаем рынок, готовы обсуждать индивидуально.

• Гибкое начало рабочего дня, возможность посещения офиса для коллег из Москвы, Санкт-Петербурга и Ярославля. Полная удалёнка для коллег из остальных городов.

• Постоянный профессиональный и личный рост, самостоятельность в работе. Как одно из направлений развития мы предлагаем рост от разработчика до ведущего разработчика, далее тим-лид /архитектор ;

• Открытая корпоративная культура.

• Минимум бюрократии и отчётов, а совещания только по необходимости и с чёткой программой.

• Корпоративный университет, наставничество и развитие.

• Полис ДМС, корпоративные тарифы на фитнес и занятия английским на ведущих платформах.

Приходи к нам в команду, будем вместе создавать крутые и полезные вещи!