Data Engineer (удаленная работа)

Вакансия: Data Engineer

Описание вакансии

HuntIT - это передовое международное рекрутинговое агентство, которое специализируется на поиске и подборе высококвалифицированных специалистов в сфере IT и Digital, сотрудничает с ведущими IT-компаниями, рекламными агентствами и работает над крупными проектами.

Сейчас мы находимся в поиске Data engineer в команду, которая уже более одного года трудится над созданием игр в различных индустриях. Сотрудники создают новые игры, прорабатывают разные концепции, занимаются развитием RnD направления и тестированием различных гипотез для создания абсолютно инновационных продуктов.

Обязанности:

• Груминг и подготовка задач для команды инженеров;
• Построение и поддержка высокоэффективных ETL-процессов;
• Разработка и оптимизация архитектуры данных;
• Поддержка и интеграция с аналитическими инструментами для создания бизнес-отчетности;
• Обеспечение высокой доступности и производительности систем хранения данных;
• Участие в проектировании и построении единой системы данных компании;
• Обеспечение качества и безопасности данных на всех этапах обработки.

Требования:

• Опыт проектирования и управления Data Lake с использованием технологий, таких как S3 и Snowflake;

• Глубокое знание ClickHouse, включая архитектуру, масштабирование и оптимизацию.

• Навыки настройки и управления процессами ETL/ELT, включая использование Apache Kafka и Apache Airflow;

• Знание принципов ACID-транзакций, управления схемами данных и версионирования данных;

• Опыт в оптимизации производительности запросов и данных;

• Умение работать с инструментами мониторинга и визуализации, такими как Prometheus, Grafana и Redash;

• Опыт работы с облачными платформами (AWS) и их сервисами;

• Опыт настройки и работы с CDC-процессами (Change Data Capture) через Kafka/Debezium, включая управление слотами репликации и очистку Kafka-топиков;

• Знание принципов трансформации данных между системами и работы с потоковыми данными и распределенными системами.

Условия:

• Сокращенныи рабочии день (7 часов) и гибкое начало дня (с 9 до 12 по МСК);

• Дружная команда крутых специалистов и максимально комфортная рабочая атмосфера;

• Полностью оборудованное рабочее место и возможность удаленной работы;

• Частичная компенсация занятий в фитнес-зале и английского языка;

• Компенсация занятий с психологом.