Lead Data Engineer (удаленная работа)

Вакансия: Lead Data Engineer

Описание вакансии

ГК Иннотех оказывает полный спектр услуг по разработке ПО для цифровизации банковской отрасли и увеличения операционной эффективности бизнеса благодаря использованию передовых технологий.

Для реализации нового блокчейн-проекта ищем Lead Data Engineer

Наша цель:

Применить имеющийся опыт и наработки для построения новой блокчейн-платформы.

Почему мы:

• Интересные задачи по созданию амбициозного и масштабного проекта;
• Возможность выбирать и влиять на архитектуру, инструменты, подходы;
• Отсутствие "векового" legacy;
• Гибкие процессы и отсутствие банковской бюрократии.

Наш тех стек:

• Java 11 (Kotlin), Spring Framework;
• Kafka, PostgeSQL, ELK stack, Clickhouse, Redis;
• Liquibase;
• Docker, Kubernetes;
• Gitlab + Jira/Confluence.

Вместе с нами тебе предстоит :

• Управление командой разработчиков;
• R&D ключевых участков подсистем;
• Разработка ETL/ELT для корпоративного хранилища данных;
• Построение витрин данных;
• Участие в разработке архитектуры, проектировании технологических решений в рамках DWH;
• Доработка и оптимизация существующих запросов и ETL процессов;
• Внедрение и развитие инструментов для нужд инфраструктуры и разработки;
• Выявление закономерности возникновения инцидентов качества данных и формирование предложений по их устранению;
• Участие в разработке внутренних инструментов тестирования поставки данных;
• Взаимодействие с другими участниками проекта: разработчиками, аналитиками, тестировщиками, архитекторами, девопсами.

Для нас важно:

• Опыт работы в аналогичной должности от 2 лет;
• Знание алгоритмов и структур данных
• Готовность принимать решения и брать на себя ответственность;
• Знание и опыт использования технологий OLAP;
• Опыт разработки ETL-pipeline ов
• Знание основ работы с системами контроля версий (Git);
• Уверенное владение Java/Kotlin, понимание принципов работы JVM;
• Опыт взаимодействия с Clickhouse;
• Опыт построения микросервисных архитектур;
• Опыт работы с платформой Kubernetes/OpenShift/OKD;
• Опыт работы с Message/Streaming-oriented middleware (Kafka/RabbitMQ/NATS).

Плюсом будет:

• Опыт работы с Big Data технологиями (Spark, Hadoop, Airflow);
• Опыт работы с масштабируемыми СУБД (Greenplum/BigTable/HBase/Cassandra);
• Опыт оптимизации SQL запросов, работы СУБД.