Data Engineer (удаленная работа)

Вакансия: Data Engineer

Описание вакансии

BIA-Technologies бизнес-интегратор и разработчик инновационных программных решений . Более 10 лет мы создаём IT-продукты и оптимизируем процессы для повышения эффективности бизнеса своих заказчиков. BIA Technologies признанный эксперт в создании цифровых решений для крупных холдинговых компаний.

Чем предстоит заниматься:

• Развитие озёра данных на базе Hadoop: проектирование озёра данных, написание пайплайнов для подключения новых источников, написание интеграционных механизмов, в том числе для передачи данных в DWH, реализация механизмов параллельной обработки данных на базе Hadoop.

Что важно:

• Опыт работы с Hadoop и его экосистемой Hive, Spark, Kafka, Airflow и т.д;
• Знание SQL;
• Опыт программирования на Java, Scala, Python;
• Отличное понимание процессов ETL/ELT и как их применять;
• Понимание принципов CI/CD;
• Широкий кругозор в технологиях хранения, обработки и анализа данных (СУБД, ETL-инструменты, BI-решения и т.д.)

Будет плюсом:

• Опыт в администрировании Linux;
• Опыт работы с RDBMS: MSSQL Server и/или PostgreSQL;
• Опыт работы с Docker, Kubernetes;
• Опыт в областях: машинное обучение, интеллектуальный анализ данных, рекомендательные системы.

Мы предлагаем:

• Достойный уровень заработной платы, официальное оформление в аккредитованной ИТ компании, социальные гарантии;
• Комфортные условия: гибкий график, удаленный или гибридный формат работы;
• ДМС + Программа Кафетерий льгот : сотрудники за счет компании могут компенсировать расходы на страхование, обучение, спорт, спортивный инвентарь;
• Развитие и обучение: ежегодный performance review, внутреннее и внешнее обучение.