Вакансия: Старший Go разработчик, ML платформа
Описание вакансии
Привет! Это команда ML платформы.
Мы отвечаем за стандартизацию процессов MLOps и ModelOps, разрабатываем и поддерживаем сервисы и пакеты для решения задач:
- запуск пайплайнов машинного обучения,
- трекинг экспериментов,
- хранение и версионирование моделей и датасетов,
- инференс и мониторинг моделей.
Наша команда занимается разработкой сервисов и пакетов для всех DS и адаптацией инструментов ML инфраструктуры под потребности отдельных команд, кастомными интеграциями и исследованиями.
Ищем инженера, который готов вместе с нами развивать платформенную инфраструктуру и поддерживать высокий уровень инженерной культуры в компании.
Наш стек:
- GO с платформенными интеграциями
- Отлаженный командами SRE и RE Gitlab CI позволяющий проводить деплой сервисов и пакетов по кнопке.
- Python3.10 - 3.13, Poetry, Pydantic
- Kubernetes, Prometheus, Vault, Gitlab
- PostgreSQL, Redis, Clickhouse
- Выделение ресурсов по кнопке - базы, redis-ы, s3 бакеты.
Примеры задач:
- Разработка собственного сервиса по серриализации графов и последовательности запуска задач в этих графах (топологическая сортировка)
- Перезапуск графа вычислений с учетом изменений конфигурации/кода/артефакта
- Разработка и внедрение единого интерфейса просмотра логов во всех задач обучения или обработки данных
- Квотирование и мониторинг утилизации, расширение возможностей юзкейсов пользователей внутри
- Алертинг на метрики обучения и пороги существующих экспериментов по обучениюс моделями и подготовке данных
- Шаблонизация конфигурации задач и пайплайнов
Мы ожидаем:
- Опыт коммерческой разработки на GO, понимание тонкостей языка.
- Опыт в проектировании микросервисной архитектуры.
- Умение писать чистый, тестируемый код.
- Опыт работы c Git.
- Желание построить качественную ML Платформу и развивать ее.
Будет плюсом:
- Опыт работы с ML и понимание mlops-практик.
- Владение ЯП Python.
- Знаком с Airflow, Dagster, Prefect IO.
