Вакансия: Middle Data engineer (Hadoop), финтех
Описание вакансии
Мы в поисках
Middle Data engineer (Hadoop) на проект IT компании на задачи по развитию процессов загрузки/выгрузки данных крупного банка.
Формат сотрудничества - ИП или самозанятость.
Чем предстоит заниматься:
- Разрабатывать процессы загрузки данных из разных источников с использованием Spark.
- Оптимизировать сборку витрин и запросы в Spark для повышения эффективности.
- Обеспечивать вывод данных в продакшн-среду через Airflow.
- Реализовать взаимодействие с векторными базами данных в отдельных процессах.
Для нас важно:
- Релевантный опыт работы в роли Data-инженера от 2-х лет.
- Опыт работы с распределенными системами обработки данных (Hadoop, Airflow).
- SQL: Отличное владение языком запросов.
- Глубокое знание Python, включая объектно-ориентированное программирование.
- Высшее образование.
Главный принцип SkillStaff - Выбирай!
- ЭКСПЕРТИЗА. Делай выбор в пользу проектов с разным уровнем сложности и экспертных команд, где можно работать с лучшими специалистами и обмениваться опытом.
- РАЗНООБРАЗИЕ ПРОЕКТОВ. Выбирай из сотен компаний и проектов то, что интересно и полезно для твоего роста. SkillStaff помогает реализовывать ежегодно порядка 500 различных ИТ-проектов для крупного бизнеса.
- КОМФОРТ. Создавай идеальные условия для своей работы: удаленный формат работы
