Вакансия: ИТ лидер (команда витрин данных)
Описание вакансии
Требуется ИТ-лидер в команду, которая занимается разработкой и сопровождением витрин данных в банке. Команда 11 человек.
Витрины строятся на базе Arenadata Hadoop (Python, PySpark), источником витрин служат различные слои Озера данных. В дальнейшем витрины используются в Платформе исполнения моделей для принятия решения о выдаче кредитных предложений.
В зоне ответственности будет перечень работ, относящихся к построению, миграции витрин данных, их оптимизации и сопровождению.
Описание задач команды:
- Сбор, анализ, формализация требований
- Подготовка технической документации
- Оценка трудоемкости работ и планирование в рамках проектов ВТБ
- Исследование источников данных
- Составление и доработка маппингов
- Построение прототипов витрин согласно бизнес-требованиям заказчиков
- Проверка качества данных в прототипах
- Постановка задач разработчикам, аналитикам, тестировщикам в команде
- Участие в тестировании и приемке результатов
Обязанности :
- Управление командой, состоящей из аналитиков, разработчиков, тестировщиков
- Соблюдение требований и стандартов производственного процесса банка
- Взаимодействие с руководителями проектов и внутренними заказчиками
- Участие в архитектурных решениях, касающихся построения витрин данных
- Оценка трудозатрат и сроков, декомпозиция задач для команды (на спринт 2 недели, на супер-спринт 3 месяца).
- Контроль качества и сроков выполнения задач
- Участие в технической приемке разработанного функционала и взаимодействие с ИБ/внешними подразделениями
Требования :
- Опыт работы с хранилищами данных (DWH), витринами от одного года факты, снежинки, звезды и т.д.
- Опыт управления командой от одного года
- Знание SQL и Python, плюсом будет опыт работы с Hadoop (Impala/Hive)
- Знания в области Big Data (Hadoop, Spark) и опыт работы с базами данных
- Опыт работы с технической документацией
- Опыт работы с выстраиванием качества данных
- Умение профилировать источники данных, выявлять закономерности
- Умение планировать и оценивать задачи команды
- Понимание гибких методологий разработки (Agile)
- Понимание принципов CI/CD, Gitflow, управления релизами
Желательно:
- Знание планировщиков процессов (AirFlow)
- Опыт разработки и/или внедрения витрин
- Понимание способов интеграций IT-систем
Стек : Python, PySpark, Hadoop, Apache Spark, AirFlow, Kafka
