Технический лидер DWH (удаленная работа)

Вакансия: Технический лидер DWH

Описание вакансии

Мы ООО Датаномика , собираем инженерные команды под задачи крупного бизнеса. 6+ лет на рынке, 160+ инженеров в штате, 45+ реализованных проектов в финсекторе, телекоме и ретейле. Развиваем шесть направлений экспертизы: высоконагруженные банковские системы, хранилища данных (DWH), генеративный ИИ, комплаенс-системы, кибербезопасность и импортозамещение софта. Аккредитованная ИТ-компания.

Сейчас у нас открыта вакансия Тех.лида DWH на проект в крупный Российский банк.

Технологический стек: SQL, Python, Apache Spark, Hadoop/S3/S3-like, Apache Airflow, Parquet/ORC. Знание Apache Iceberg, Apache Kafka будет плюсом

Чем предстоит заниматься:

• Анализом и оценкой требований бизнеса (Управление данными / Data Governance);
• Анализом существующих и выстраиванием новых бизнес процессов;
• Созданием ETL прототипов витрин данных и доработкой существующих;
• Постановкой задач на разработчика;
• Проектированием решений, разработкой прототипов, тестированием разработанного функционала, написанием проектной документации (FSD, ER диаграммы, логической модели объектов, созданием и согласованием архитектурных Vision/OTAP, заполнением датакаталога);
• Проработкой WA при сбоях;
• Анализом и выработкой решений по поддержке отчётности при изменении внешних данных систем источников;
• Поддержкой разработанных решений в качестве 3 й линии поддержки, ad hoc выгрузки;
• Разработкой тест кейсов и проведением внутреннего и интеграционного тестирования со смежными системами потребителями данных витрины, подготовкой синтетических данных для тестирования;
• Заключением SLA с системами поставщиками данных и заказчиком, созданием контролей качества данных, разбором инцидентов КД, проработкой мероприятий по минимизации инцидентов;
• Поддержкой актуальности проектных задач в Jira;
• Контролем за выполнением работ и приёмкой функционала от поставщиков;
• Участием в создании и развитии стандартов и продуктов работы аналитиков департамента;
• Наставничеством и ревью в рамках своего направления.

Необходимые знания и навыки:

• Опыт работы с реляционными и нереляционными СУБД (предпочтительно GreenPlum, BDP/S3);

• Знание SQL на уровне написания сложных запросов, знание оконных функций и теории проектирования реляционных БД, навыки чтения чужого многоярусного кода, опыт оптимизации кода;

• Знание ETL инструментов (Apache Airflow, Spark);

• Понимание работы Управляющего механизма и подписок на загрузки источников данных;

• Опыт сбора, анализа, декомпозиции и формализации бизнес требований заказчика;

• Опыт работы с интеграционными задачами

• Знание архитектурных стандартов и стандартов разработки

• Опыт участия в проектах по разработке и внедрению прикладных информационных систем

• Умение работать с большими объёмами данных

• Опыт работы в Atlassian JIRA и Confluence

• Понимание банковских продуктов и процессов, принципов Data Governance

• Опыт разбора расхождений ККД и инцидентов на данные

• Умение разобраться в любой lineage цепочке данных по слоям, а также переливки данных между системами

• Опыт работы с git или другой системой контроля версий

• Самостоятельность и проактивность, умение чётко планировать своё рабочее время, выполнять поставленные задачи в установленные сроки

• Навык по ведению переговоров, умение вести аргументированные диалоги с членами команды

• Анализ существующих и выстраивание новых бизнес процессов

Мы предлагаем:

• Удаленный или гибридный формат работы;
• Работа в аккредитованной ИТ-компании;
• Проекты в крупнейших банках и корпорациях реальная нагрузка и масштаб (mission-critical системы, высоконагруженная обработка данных);
• Регулярное обучение и профильные конференции за счёт компании, современное оборудование;
• Официальная белая зарплата, оформление с первого рабочего дня, полное соблюдение ТК РФ;
• Интересные амбициозные задачи с достижимым результатом