Data Engineer (удаленная работа)

Вакансия: Data Engineer

Проект : Hазвитие платформы больших данных. Мы ищем опытных специалистов, профессионалов в работе с данными.

Сейчас нам нужен Разработчик ЕТL на создание аналитических платформ и data-продуктов для разных направлений корпоративно-инвестиционного бизнеса Банка.

Команда платформы консолидирует данные из различных внешних и внутренних источников, запускает пилотные проекты и обогащает данными в соответствии с требованиями бизнес-заказчиков

Основные задачи:

• Миграционные задачи: перенос существующих витрин на фреймворк SDP Hadoop

• Развитие и внедрение продуктов Сбербанка

Требования :

• Опыт работы от 2х лет;

• Навыки программирования на Java;

• Наличие практического опыта работы с Hadoop (Hive, Impala, sqoop, oozie, HDFS, YARN), понимание парадигмы map-reduce и алгоритмов работы Spark;

• Опыт работы с ETL-инструментами (Informatica BDM, ODI, Pentaho) и BI-средствами;

• Опыт программирования и разработки алгоритмов и структур данных;

• Понимание как оптимизировать ETL процессы;

• Фундаментальные знания принципов построения распределенных систем хранения и обработки данных.

Желательно

• Опыт работы с реляционными СУБД (Oracle, MS/SQL), навыки оптимизации запросов;

• Опыт работы с NoSQL базам данных (HBase, Cassandra);

• Опыт работы с Unix shell;

• Jenkins;

Условия:

• Возможность профессионального и карьерного роста в компании, возможность поучаствовать в разных проектах;
• Опыт работы в распределенной команде профессионалов;
• Уровень заработной платы обсуждается индивидуально;
• Возможность работать удаленно