Дата инженер/ Data Engineer (удаленная работа)

Вакансия: Дата инженер/ Data Engineer

Описание вакансии

В международную производственную компанию ищем Дата инженера / Data Engineer, который будет:

• отвечать за прием, обработку и распространение данных, используемых бизнес-системами, управляемыми данными;
• обеспечивать разработку программного обеспечения и поддержку доставки продуктов для продуктов данных и групп продуктов.

Одним из направлений деятельности на этой должности будет проектирование, разработка и поддержка платформы производственных данных и домена данных как централизованного пространства для работы с данными (включая потоковую передачу) на основе облачных технологий на заводах.

Чем предстоит заниматься:

• проектирование и разработка витрин данных;
• проектирование, разработка и поддержка процессов ETL для загрузки данных в/из Data Lake/Factory Data Platform;
• интегрировать новые источники в DataLake/DWH/Factory Data Platform;
• настройка и поддержка фильтрации, маршрутизации и очередей данных на платформе Factory Data Platform;
• настройка и поддержка пост-обогащения, преобразования и контекстуализации данных в Factory Data Platform;
• определение и поддержка политики хранения тегов/данных;
• контроль качества загружаемых данных (ручные и автоматические тесты DQ);
• написание документации;
• сотрудничайте с экспертами по данным и аналитике, чтобы улучшить функциональность продуктов компании для обработки данных.

Мы ожидаем:

• обширный опыт предоставления решений по обработке данных для облачных приложений;
• понимание работы базы данных и принципов разработки DWH;
• понимание хранилищ данных, очистки данных, конвейеров данных и других аналитических методов, необходимых для использования данных;
• опыт работы с технологиями Hadoop (HDInsight, Spark, Hive, Scala и т. д.);
• хорошее знание SQL, Python/Scala или Java;
• опыт работы с Nifi, Kafka, Airflow, InfluxDB/Flux;
• опыт разработки потоковой передачи данных;
• понимание технологии серверов ретрансляции KEP/OPC (OPC UA/DA, теги, именование, публикация) как плюс;
• опыт работы со стеком Yandex Cloud Platform/ Azure от 1 года;
• инициативный человек, который приветствует ответственность, а также способность преуспевать в развивающейся организации и способность привносить структуру в неструктурированные ситуации.
• уровень английского языка средний или выше;

Soft skills:

• аналитическое мышление;
• обучение на лету;
• умение структурировать работу и расставлять приоритеты;
• увлечение бизнес-аналитикой и анализом данных;
• самодисциплина;
• открытость, умение работать в команде;
• умение видеть альтернативы;
• многозадачность;
• умение четко объяснять и отстаивать мнение;

Условия, которые мы предлагаем:

• официальное трудоустройство по ТК РФ;
• работа в команде профессионалов в крупнейшей международной FMCG компании с развитыми корпоративными ценностями и стандартами;
• для работы выдаём корпоративный ноутбук;
• график работы: 5/2, сб и вс- выходные дни;
• удалённая работа.