Data Engineer (удаленная работа)

Вакансия: Data Engineer

Описание вакансии

РСХБ-Интех аккредитованная IT-компания.

Мы разрабатываем новые банковские продукты и улучшаем текущие. Наши сервисы помогают миллионам клиентов удалённо пользоваться банковскими услугами, оформлять карты, брать кредиты и инвестировать. Мы даём возможность агропредпринимателям продавать и покупать сельскохозяйственные товары онлайн, а малому и крупному бизнесу вести финансовые дела в надёжном и удобном онлайн-пространстве.
Вам предстоит участвовать в больших и инновационных проектах, создавать новые digital-продукты. Наша цель сделать экосистему нового поколения, инновационный продукт и усовершенствовать взаимодействие пользователя с банком, сделать его понятным и удобным.

Лаборатория искусственного интеллекта занимается внедрением технологий искусственного интеллекта в бизнес-процессы банка. Мы занимаемся продуктовой аналитикой, создаем модели машинного обучения для бизнеса, развиваем свою MLOps/AnalyticsOps платформу и делаем на ней инструменты и фреймворки как для себя, так и для других дата-специалистов РСХБ и РСХБ-Интех.

Сейчас в связи с активным расширением нам нужен Инженер данных.

Обязанности:

• Проектирование и разработка ETL и ELT потоков, витрин данных для моделей;
• Очистка и стандартизация сырых данных, разработка проверок качества данных;
• Осуществление переливки данных из источников в Озеро Данных;
• Оптимизация и автоматизация процессов работы с данными;
• Сопровождение существующих регламентов на Airflow;
• Анализ и мониторинг производительности существующих запросов и их последующая оптимизация;
• Внедрение современных практик и инженерных подходов;
• Регулярное взаимодействие с Data Science и Data Analyst, ревью и валидация написанных запросов, помощь в оптимизации.

Требования:

• Продвинутые знания теории БД, SQL (PostgreSQL, PL/SQL), Python 3.8+, AirFlow, Pandas;
• Опыт работы с распределенными хранилищами данных (Greenplum, Hadoop) и классический BigData стек (Hive/Impala, hdfs, PySpark);
• Знание Python-библиотек для работы обработки данных;
• Навыки работы с Jupyter (notebook, lab, hub) ;
• Уверенное понимание Git и принципов разработки, базовое понимание CI/CD;
• Знания различных типов архитектуры хранилищ, ETL/ELT-инструментов и принципов работы с данными;
• Умение покрывать код и артефакты разработки документацией;
• Английский, достаточный для чтения и понимания документации.

Будет плюсом:

• Понимание принципов контейнеризации, базовые знания Docker/Kubernetes;
• Опыт работы в команде вместе с DS и ML специалистами.

Мы предлагаем:

• Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д.);
• Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы;
• Забота о вашем здоровье: ДМС после испытательного срока, куда входит стоматология;
• Гибкий график или полная удаленка (по итогам общения с командой);
• Комфортные и современные офисы в городах присутствия (Москва, Санкт-Петербург, Уфа, Новосибирск, Белгород и т.д.);
• Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (Скидки на спортзалы, рестораны, маркетплейсы и т.д.).