Data Engineer Senior (удаленная работа)

Вакансия: Data Engineer Senior

Описание вакансии

Наша уникальность в том, что мы не просто IT-компания, мы пространство, в котором тебе всегда будет чем заняться, чему научиться, с кем пообщаться, получить помощь и поддержку в любой ситуации. Живем по принципам Икигай и в первую очередь заботимся о наших сотрудниках, стараясь привносить гармонию и стабильность в их жизнь через реализацию их потребностей.

Сейчас в один из наших проектов мы ищем тебя - уверенного Data Engineer с опытом работы от 3х лет.

Наши ожидания:

- Владение одним из языков программирования (Java, Groovy), знание принципов ООП, умение читать чужой код.

- Сборка проекта, компиляция и деплой в Rancher. (Docker).

- Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке технологий BigData.

- Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов). - Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.).

-Умение работать с Git в консоли.

- Знания специфики работы ETL инструментов (Apache Nifi, Airflow, интеграционные шины SAP BW, Talend, Informatica, SAS и т.п.).

- Опыт работы с Hadoop.

- Понимание устройства HDFS, форматов данных.

- Опыт работы с Hive или любым другим хранилищем на основе Hadoop.

- Опыт использования системами ведения проектов и документации.

- Умение работы с архитектурными схемами.

- Понимание принципов построения и хранения данных

- DWH и DataLake.

- Желателен опыт администрирования Unix/Linux или Hadoop (HDFS , Yarn, Ranger , Spark, Zookeeper), Zabbix, Ansible.

Вам предстоит:

• Самостоятельная разработка, реализация и поддержка интеграционных решений, на стеке технологий, принятых в команде. (Java, Groovy, Apache Nifi, Airflow);

• - Определение стека технологий для конкретных проектов и задач.

  - Решает технически сложные задачи, которые другие инженеры в команде не в состоянии решить.

  - Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение задач в установленный срок.

  - Разработка и контроль актуальности документации взаимодействия конфигурационных единиц платформы больших данных.

  - Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством.

  - Контроль за качеством интеграционных решений, с последующим заведением задач дефектов на рефакторинг.

  - Определяет технологическую стратегию развития проекта или продукта, работает на перспективу.

  -Выстраивает процессы (например, CI/CD, код ревью), внедряет и развивает инженерные практики.

Условия:

• Работа в аккредитованной компании
• Высокий уровень дохода с ежегодной индексацией заработной платы
• Удаленный формат работы
• Минимум бюрократии и максимум мобильности и автоматизации
• Оформление по ТК РФ/ГПХ/СЗ/ИП (на ваш выбор)
• Есть реально работающая служба заботы :)