Senior Data Engineer/Data Engineer (удаленная работа)

Вакансия: Senior Data Engineer/Data Engineer

Мы разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными независимо от их формата, метода хранения и эксплуатации. Платформа основана на концепции Infrastructure as Code (IAC) и состоит из нескольких независимых программных продуктов и сервисов на базе JVM/Scala и Kubernetes. Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными, а также контролем их использования в периметре частных облачных сред.

Для участия в разработке аналитической платформы мы ищем Data Engineer.

Технологический стек:

• Языки программирования: Scala, Python.


• Обработка и хранение данных: Spark, Flink, Kafka, ClickHouse, Cassandra, ElasticSearch.


• Прочие технологии и фреймворки: Finagle, Jackson, ScalaTest, Docker.

Задачи:

• Реализация компонентов платформы, связанных с обработкой больших данных.


• Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения.


• Формирование и обработка больших наборов данных.


• Участие в разработке архитектуры платформы.

Наши ожидания:

• Профильное образование: информационные технологии, статистика, математика.


• Опыт работы по специальности от 3-х лет (для Senior Data Engineer от 5 лет).


• Опыт разработки на Scala или Java от 1-го года (для Senior Data Engineer от 3-х лет).


• Знание особенностей реализации различных алгоритмов и структур данных.


• Опыт работы в команде.

Будет плюсом:

• Опыт работы с Apache Spark, Flink, Kafka.


• Опыт работы с распределенными БД: Cassandra, HBase, ElasticSearch и т.д.


• Глубокое понимание особенностей архитектуры JVM.


• Интерес к технологиям Data Science, участие в конкурсах по машинному обучению.

Мы предлагаем:

• Работу в развивающейся технологической компании.


• Комфортные рабочие места в современном офисе, зона отдыха.


• Оформление в соответствии с ТК РФ.


• Заработную плату на уровне лидеров индустрии.


• Гибкий график для совмещения с научной и преподавательской деятельностью.


• ДМС + стоматология. Тестирование на COVID в медцентрах, в офисе и на дому.


• Возможность участия в профессиональных конференциях.


• Корпоративные скидки в фитнес-клуб World Class.


• Спортивные активности.


• Релокационный пакет для специалистов из других регионов.


• Работу дистанционно, в офисе или комбинированный формат.