Вакансия: Разработчик ETL (DWH) / Инженер данных / Data Engineer
Описание вакансии
В связи с ростом компании и желанием меняться к лучшему мы ищем в свою команду Data Engeener!
Так как мы активно расширяемся в цифровизации у вас есть уникальная опция выбирать проект и направление функционального вектора.
Что нужно будет делать:
- Проектировать и поддерживать архитектуру DWH в соответствии с потребностями бизнеса;
- Обслуживать и обеспечивать функционирование DWH;
- Разрабатывать и модернизировать механизмы ETL/ELT;
- Анализировать, отлаживать и оптимизировать ETL/ELT-процессы;
- Внедрять инструменты Data Quality и подходы, обеспечивающие контроль качества данных;
Для нас важно:
- Высшее образование, предпочтительные профили: математика/статистика;
- Знание SQL (ddl, dml);
- Опыт построения ETL/ELT-процессов;
- Умение работать с инструментами для автоматизации и планирования задач (например, Apache Airflow);
- Опыт работы с СУБД PostgreSQL, ClickHouse;
- Опыт работы с s3;
- Ответственность за результат, способность к самостоятельной проработке новых решений;
- Понимание принципов работы брокеров и шин сообщений;
Будет большим плюсом если есть:
- Опыт работы с OpenMetadata;
- Опыт работы с Kafka, RabbitMQ, Redis Pub/Sub;
- Опыт backend-разработки;
- Опыт проектирования и реализации архитектуры DWH;
- Опыт проектирования и реализации событийно-ориентированной архитектуры;
- Опыт работы с инструментами для построения ETL/ELT и интеграций: Airbyte, DBT, Talend, Microsoft SSIS;
- Опыт работы с СУБД MongoDB, MSSQL;
- Опыт работы с инструментами визуализации и мониторинга.
Ключевые навыки:
- PostgreSQL, ClickHouse, S3, Airflow, SQL, Python
Наш стек:
- Производственный процесс: Jira, Confluence, Gitea
- Мессенджер: eXpress
- Брокер сообщений: Kafka
- Хранение данных: PostgreSQL, ClickHouse, MinIO
- BI: Power BI, SuperSet
- Управление данными: OpenMetaData
