Data Engineer (удаленная работа)
(вакансия не опубликована)

Вакансия: Data Engineer

Описание вакансии

Мы- аккредитованная IT-компания, объединяющая опытных сотрудников, специализирующаяся на разработке, сопровождении и эксплуатации информационных систем, поддержки принятия решений в областях экономической и хозяйственной деятельности, в том числе обеспечения исполнения государственных услуг и функций.

В связи с расширением штата, мы открываем вакансию Data Engineer .

Обязанности:

Настройка и контроль автоматической выгрузки отчётов в Superset через Airflow и NiFi;
Мониторинг выполнения процессов, выявление и первичный анализ ошибок;
Фиксация и документирование сбоев, взаимодействие с разработчиками для их устранения;
Замеры скорости выполнения SQL-запросов и формирования отчётов, сбор статистики;
Проверка корректности данных в отчётах (сверка с исходными источниками);
Взаимодействие с другими членами команды для эскалации сложных инцидентов;
Участие в улучшении процессов мониторинга и автоматизации;
Вывод изменений при помощи настроенных инструментов CI/CD.

Требования:

Опыт работы с Airflow (мониторинг DAG, анализ логов, перезапуск задач);
Базовое понимание NiFi (просмотр потоков, проверка статусов);
Знание сетевых технологий (DNS, TCP/IP, SSH, HTTP);
Умение писать простые SQL-запросы (SELECT, JOIN, агрегация) для проверки данных;
Знание основ Superset или аналогичных BI-инструментов (просмотр дашбордов, проверка метрик);
Знание основ работы с инструментами CI/CD (GitLab CI, Argo CD и др.);
Навыки работы с логами и поиска причин ошибок;
Умение работать в команде и готовность к обучению новым технологиям;
Ответственность и стрессоустойчивость;
Готовность обучаться и развивать свои навыки;
Внимание к деталям и умение работать с документацией.

Приветствуются:

Опыт работы с DWH (PostgreSQL, ClickHouse и др.);
Базовые знания Python для чтения скриптов;
Понимание принципов ETL.

Мы предлагаем:

Удаленную работу;
Ежегодно индексируемую ЗП;
Официальное трудоустройство по ТК РФ (белая зп без задержек);
Возможности для профессионального роста и развития;
Премия по результатам выполняемых работ в проекте;
Дружелюбный и поддерживающий коллектив;
Участие в интересных и масштабных проектах;
Аккредитованную компанию в Минцифры.