Дата-инженер (удаленная работа)

Вакансия: Дата-инженер

Описание вакансии

Мы команда OptiTeam, крупный системный интегратор. Мы занимаемся IT-консалтингом, оптимизацией и автоматизацией бизнес-процессов и создаем IT- инфраструктуру на базе платформы Optimacros .

Optimacros универсальная платформа для оптимизационного и консолидационного планирования, прогнозирования, бюджетирования, управления HR, контроля выполнения KPI и других видов аналитики. Мы обеспечиваем возможность обработки и анализа больших объемов данных, необходимых для эффективного принятия решений, а также планирования и мониторинга текущей операционной деятельности компании.

Мы ищем специалиста, который будет комплексно настраивать интеграции платформы Оптимакрос с внешними источниками данных, а именно:

• Анализировать источники данных (чаще всего SQL корпоративные хранилища с финансовой информацией компании);
• Проектировать и руками настраивать интеграционные потоки с помощью прямого коннектора системы или самописных API запросов;
• Поддерживать настроенные потоки, делать для них документацию, отрабатывать инциденты;
• Обеспечивать стабильность, качество и полноту передачи данных, аудируемость и тестируемость процесса интеграции
• Писать и оптимизировать сложные SQL запросы, обеспечивая работу на больших объёмах данных;
• Создавать, поддерживать и улучшать ETL процессы, минимизируя задержки и ошибки;
• Автоматизировать проверку качества данных;
• Документировать решения;
• Нести ответственность за то, чтобы система получала только корректные полные данные и процесс не падал при сбоях на каком-то этапе.

Что ожидаем от кандидата

• Нам нужен специалист, который в рамках проекта автоматизации фин. планирования сможет проанализировать источники данных и потребности системы, найти недостатки данных (например дубликаты, пропуски, не консистентность), устранить их спроектировать, и собрать работающий процесс импорта по расписанию из хранилища с миллионами строк так, чтобы процесс получился стабилен, поддерживаем и работал быстро;
• Также вам нужно хорошо понимать лучшие практики по обеспечению сохранности данных на уровне БД (бекапирование, репликация, настройки доступов и тд) и в процессе интеграций (предобработка, контрольные суммы и тд);
• Понимание REST API и структуры HTTP запросов .
• Знание SQL, Javascript, Python

Основными рабочими инструментами будут:

• Excel, DBeaver, Optimacros
• Apache Kafka, Airflow
• Superset, PowerBI

Работа у нас это:

• Работа в IT компании с перспективой роста.

• Удалённый формат работы.

• Официальное трудоустройство в аккредитованной IT компании.

• Прозрачная система вознаграждения.

• Возможность соблюдать work/life balance.

• Обширные ресурсы и компетенции Компании для реализации ваших проектов и идей.

• А самое главное возможность расти вместе с нами, общаться с коллегами без излишних формальностей, повышать свой уровень знаний и работать в удовольствие.