Дата-инженер (удаленная работа)

Вакансия: Дата-инженер

Описание вакансии

Комус ведущий производитель и комплексный поставщик товаров и услуг для бизнеса.

IT-ландшафт включает в себя собственные ЦОДы, мощности в облаках и 100 бизнес-приложений, 40 из которых крупные.

Сегодня ИТ-подразделение Комус это аккредитованная ИТ-компания, численностью свыше 900 сотрудников.

Мы реализуем амбициозную программу цифровой трансформации, и в нашей команде открыта вакансия дата-инженер

ПРЕДЛАГАЕМ

• Конкурентный доход (обсуждаем индивидуально)
• Официальное оформление по ТК РФ в аккредитованную ИТ-компанию
• Гибридный или полностью удаленный формат работы (гибкость и индивидуальный подход), график 5/2 с 9.00 до 18.00
• Удобную локацию новый современный офис БЦ Интеграл в пешей доступности от ст. м. Авиамоторная
• Развитую офисную инфраструктуру: зоны с бесплатными напитками и снеками, корпоративный бесплатный фитнес-центр и игровые пространства
• ДМС
• Корпоративную программу лояльности и скидок (товары и услуги, развлечения, рестораны, спорт, отдых и многое другое)
• Абонементы в фитнес-клубы по специальным условиям
• Дополнительное премирование в рамках реферальной программы Все в Комус
• Корпоративное обучение и поддержка опытного наставника
• Возможности для развития и карьерного роста
• Драйвовые мероприятия и подарки к праздникам для сотрудников и их семей

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ

• Дорабатывать OpenSource-решения DataHub и GreatExpectations интеграции с компонентами микросервисной платформы
• Дорабатывать инструменты управления инфраструктурой платформы в части компонентов слоя данных
• Реализовывать компоненты продуктов данных и процедуры контроля качества данных
• Проектировать компоненты и конвейеры обработки данных для поддержки продуктовой аналитики
• Писать unit и интеграционные тесты
• Участвовать в разработке концепций, архитектурных решений и подходов связанных с внедрением парадигмы data governance
• Участвовать в развитии CI/CD процессов
• Проводить код-ревью

ДЛЯ НАС ВАЖНЫ

• Знание современных архитектур данных (MDW, Data Lake, Data Mesh, Data flow)
• Понимание принципов потоковой и пакетной обработки данных
• Опыт в разработке и тестировании ETL/ELT-процессов на базе одного из фреймворков (Airflow, Dagster, Spark, Flink, Nifi)
• Понимание принципов и практик data governance и контроля качества данных
• Опыт реализации решений по тестированию и контролю качества данных
• Опыт разработки на Python или Java от 5 лет
• Умение писать SQL-выражения
• Опыт работы с одной из реляционных СУБД (PostgreSQL, MySQL, MSSQL)
• Понимание принципов и паттернов юнит-тестирования. Опыт работы с фреймворками юнит-тестирования на Python/Java
• Понимание принципов рефакторинга и опыт работы в парадигме TDD (Test-Driven Development)
• Опыт использования NoSQL решений (Elastic, MongoDB, Cassandra, ClickHouse и пр.)
• Опыт работы с одним или несколькими IaaC решениями (Terraform, Ansible, Helm)
• Знание и опыт использования Docker, docker-compose
• Опыт работы с git

БУДЕТ ПЛЮСОМ

• Опыт разработки Enterprise-решений с использованием Spring framework / Spring Boot / Quarkus или другими
• Знание современных паттернов проектирования (GoF, Fowler, EIP)
• Знание современных архитектурных стилей и архитектурных принципов (modulith, микросервисы, RESTful, EDA, 12factors, reactive)
• Понимание CI/CD процессов и DevOps практик
• Опыт работы с k8s / OpenShift / Nomad / Docker Swarm или другими схожими технологиями
• Знание современных методологий разработки ПО