MLOps/Главный аналитик данных (удаленная работа)

Вакансия: MLOps/Главный аналитик данных

Описание вакансии

Обязанности:

• Разработка и поддержка компонентов системы AutoML на базе Scala и Apache Spark.
• Интеграция и настройка TransmogrifAI для автоматизации процессов подготовки данных и обучения моделей.
• Оптимизация производительности пайплайнов машинного обучения, включая обработку больших объемов данных в распределенной среде.
• Реализация и поддержка процессов продуктивизации моделей с использованием контейнеров и систем оркестрации (Kubernetes).
• Взаимодействие с горячими хранилищами данных для обеспечения быстрого и безопасного доступа к данным.
• Участие в проектировании архитектуры решений и оптимизации существующих процессов.
• Сотрудничество с другими командами для интеграции решений AutoMLв бизнес-приложения и сервисы.
• Мониторинг и улучшение качества работы моделей на продуктиве, включая логику тестирования, измерение и улучшение метрик производительности.

Требования:

• Опыт работы: 3+ лет опыта в разработке на Scala, желательно в проектах, связанных с машинным обучением или анализом данных.
• Языки программирования: Глубокие знания и опыт работы с Scala.
• Технологии: Опыт работы с Apache Spark, TransmogrifAI.
• Понимание MLOps: Опыт разработки и развертывания моделей в продуктивных средах, включая CI/CD для ML проектов.
• Опыт работы с контейнерами: Знания Docker, Kubernetes.
• Опыт работы с данными: Опыт работы с большими данными и распределенными вычислениями.
• Хранилища данных: Опыт работы с объектными хранилищами данных.
• Анализ данных: Опыт работы с инструментами и библиотеками для анализа данных.
• Математическая база: Хорошее понимание статистики, линейной алгебры и методов машинного обучения.
• Желательные навыки:
• Опыт работы с другими языками программирования и фреймворками для машинного обучения (Python, H2O.ai, MLlib).
• Опыт работы с системой контроля версий Git и понимание GitFlow.