Вакансия: DataOps (DWH/Hadoop) инженер
Описание вакансии
СТЕК: Hadoop, Spark, администрирование HDFS + Spark + Iceberg + Airflow кластера, установка Trino, Starrocks.
ПРОЕКТ: Финтех проект. Российский брокер.
ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ :
- Профилированием данных в системах источниках.
- Разработкой ETL/ELT.
- Разработкой слоев данных DWH, витрин DM.
- Описанием разработок в Confluence.
- Оформлением работ в Jira.
- Участием в выборе технологий, компонентов, архитектуры решений.
- Внедрением реализованных решений.
ЕЩЁ БУДЕТ ВОЗМОЖНОСТЬ УЧАСТВОВАТЬ в разработке/развитии решений как на базе современных Open Source решений, так и на базе "фундаментальных" Enterprise продуктов лидирующих в "квадрате" Gartner.
Greenplum - MPP
ClickHouse - Data Mart
Postgree SQL - Data Mart OLTP
Oracle Golden Gate - CDC
Apache Nifi, Apache Kafka, Apache Airflow, Iceberg, Trino, Starrocks IBM DS - ETL
CI/CD, DevOps, DataOps in DWH.
Поддержка текущих решений на базе MPP - SAP IQ, OGG, IBM DS. MS SQL.
СКУЧНО И НЕИНТЕРЕСНО ТОЧНО НЕ БУДЕТ! :)
ТЫ НАШ ИДЕАЛЬНЫЙ КАНДИДАТ, ЕСЛИ У ТЕБЯ ЕСТЬ: - Опыт работы системным инженером/администратором/архитектором от 3-х лет.
- Владение Ansible или другими системами управления конфигурации/автоматизации.
- Опыт работы с Kubernetes/Openshift и интеграция с ArgoCD.
- Знание UNIX, Linux (deb and rpm-based). Высокий навык администрирования Linux.
- Опыт написания bash/python-скриптов (автоматизация задач).
- Опыт работы с системами контроля версий, gitops-подход.
- Опыт написания pipeline и опыт работы с системами непрерывной интеграции (GitLab CI, Jenkins, Tekton, TeamCity, Bamboo) - преимуществом будет умение работать с несколькими из них.
- Умение ясно излагать свои мысли.
- Опыт Apache Kafka, S3 (Minio, Ceph, Ozone), базовый опыт работы с Hadoop (hive, spark, hdfs), Iceberg.
МЫ ПРЕДЛАГАЕМ :
- Официальное трудоустройство по ТК РФ.
- График работы 5/2.
- Гибкое утро.
- Подключение к программе ДМС (включает стоматологию, обследования, лечение заболеваний и т.д.), а также возможность страхования родственников по корпоративной цене.
- Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения.
- Прозрачную системы карьерного развития в компании.
- Персонального наставника с первого дня работы.
- Возможность развития личной экспертизы и экспертизы компании.
- Собственную платформу внутренних и внешних образовательных программ.
- Возможность пройти сертификацию.
МЫ ИЩЕМ КАНДИДАТА БЕЗ ПРИВЯЗКИ К ЛОКАЦИИ КОМПАНИИ.
100% УДАЛЁННЫЙ ФОРМАТ РАБОТЫ НА ТЕРРИТОРИИ РФ.
Офисы компании находятся в городах: МОСКВА, САНКТ-ПЕТЕРБУРГ, НИЖНИЙ НОВГОРОД, САРАТОВ, ВОРОНЕЖ, ПЕНЗА, САМАРА, КРАСНОДАР.
