Data-engineer (удаленная работа)

Вакансия: Data-engineer

Описание вакансии

Требования:

• Отличные знания SQL: оптимизация запросов, понимание планов запроса, внутренней работы SQL и баз данных (оптимизация запросов, join, типы индексов и т.д.).
• Уверенное знание Python: написание API, алерт-ботов, небольших скриптов и сервисов. Опыт работы с СlickHouse.
• Опыт и хорошее понимание принципов работы Airflow.
• Опыт проектирование архитектуры DWH.
• Опыт написания сервисов с нуля.
• Понимание концепции (звезда, Data Mesh, Data Vault) хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality.
• Знание инфраструктурных инструментов: Docker, Bash, Git, CI/CD, Kubernetes, Grafana.

Чем предстоит заниматься:

• Развивать инструменты контроля и поддержания качества данных (Data Quality / Data Governance).
• Разрабатывать архитектуру данных (YTsaurus/ClickHouse).
• Разрабатывать ETL-процессы.
• Оптимизировать текущие процессы (YTsaurus/ClickHouse).
• Оптимизировать запросы (SQL/Python).
• Разрабатывать и оптимизировать Data Warehouse (Python/Airflow).
• Создавать и поддерживать витрины данных (функции/VIEW и т.д.)
• Предоставлять экспертную поддержку внутренним потребителям (Data Analysts, Data Scientists) по вопросам, связанным с использованием данных.

Условия:

• Работа в крупной и стабильной IT компании.
• Удаленный формат работы - возможность работать из любой точки мира.
• Оформление по ИП или ГПХ;
• Профессиональный и дружный коллектив.
• Высокий уровень стабильного дохода, условия обсуждаются с каждым кандидатом индивидуально по результатам интервью.
• Выплата в удобной валюте