Вакансия: Data Engineer
Описание вакансии
Команда Evrone занимается продуктовой разработкой стартапов и помогает в цифровой трансформации бизнеса в России, США и Европе.
Мы занимаемся технически сложными, высоконагруженными, наукоёмкими проектами, проектами с большой бизнес логикой или большой серверной инфраструктурой.
Нам доверяют: аналитику, проектирование интерфейсов и дизайн, разработку, инфраструктуру и эксплуатацию. Мы становимся технической командой проекта целиком или консультируем и расширяем возможности существующих команд наших клиентов.
Вся команда работает удаленно с 2008 года . Мы знаем как организовать распределенную разработку комфортно и эффективно. Есть офисы для работы и встреч в Москве и Воронеже, а также офисы продаж в Сан-Франциско и Берлине.
Сейчас мы находимся в поиске Data Engineer на проект, связанный со стримингом музыки.
Это аудиосервис, специализирующейся на высоком качестве записи, уникальном стереозвучании и обилие стереоэффектов в композициях.
Ищем в команду DE Business - команда занимается развитием процессов обработки данных для бизнеса (интеграция и обработка данных). Ключевые бизнес-заказчики - аналитики данных, data science, продуктовые команды. Сейчас живем на Hadoop-стеке, но уже начали переход на LakeHouse-архитектуру (S3, Spark+k8s, Trino, Iceberg), есть возможность поработать на новом стеке, который сейчас активно развивается на рынке.
Приятные особенности : известный проект, большое количество пользователей, современные подходы к разработке, AI&ML.
Задачи:
- Проводить базовую аналитику и сбор требований от заказчиков для реализации ETL-пайплайнов обработки данных;
- Разрабатывать ETL-пайплайны обработки данных для бизнес-пользователей и data science;
- Подключать новые источники данных и интегрироваться в большую экосистему партнеров;
- Проводить тестирование и отладку ETL-пайплайнов на тестовой среде;
- Заниматься поддержкой ETL-пайплайнов (3-я линия);
- Документировать результаты разработки;
- Участвовать в выводе разработанных ETL-пайплайнов в прод-среду;
- Обучать младших коллег, помогать аналитикам, продвигать лучшие практики работы с данными.
Какой опыт для нас важен:
- Релевантный опыт работы от 2-х лет;
- Опыт создания ETL-пайплайнов на AirFlow;
- Опыт работы с пакетной обработкой больших данных;
- Знание Python, SQL;
- Практический опыт работы с AirFlow, Hadoop, Spark, Kafka;
- Базовые знания kubernetes и опыт его использования в работе.
Будет плюсом:
- Опыт работы c data science командой;
- Опыт снижения time-to-data (снижение времени доставки данных до пользователей).
Почему Evrone, и что мы предлагаем?
- Удаленную фулл-тайм работу. Но если вы хотите ходить в офис, они есть в Москве и Воронеже;
- Мягкий график. Достаточно синхронизировать тайм-зоны и иметь пересечения рабочего времени с командой;
- Качественный онбординг и HR-менеджмент (1:1, Grow Review). По желанию меняем проекты, не даем стагнировать;
- При формировании команды проекта учитываем профессиональные и/или личные интересы наших сотрудников;
- Работу в разновозрастном, разнополом и потрясающе дружном и профессиональном коллективе;
- Хорошо организованный воркфлоу, отсутствие бюрократии. Работа на доверии.
Одна из ценностей Evrone работа с удовольствием.
Для этого мы придумали Evrone Benefits. Каждому из нас выделяется годовой бюджет, автоматически пополняемый каждый новый год вашей работы в Evrone. Его можно потратить на полезные категории трат, направленные на:
- ДМС и здоровье;
- Спорт и абонемент для фитнеса или инвентарь для спорта;
- Курсы иностранного языка;
- Техника для работы и улучшение рабочего места;
- Обучение: курсы, тренинги, мастер-классы, семинары, книги и конференции.
Бонусы и премии:
- Премии за локальные успехи и отличную работу в целом;
- Автоматическая индексация зарплаты без необходимости кого-то об этом просить, а также повышение зарплаты по мере роста компетенций;
- Премии за привлечение новых сотрудников и новых клиентов;
- Дополнительная премия за выступления на конференциях и митапах;
- У вас есть возможность принять участие в проведении технических интервью специалистов, которые могут стать вашими коллегами. Проведение интервью оплачивается.
Обучение и рост компетенций:
- Проводим внутренние митапы по различным стекам;
- У нас есть культура менторства. В повседневных задачах и планировании карьеры будет помогать наставник;
- Есть внутренняя библиотека с электронными книгами и записанными курсами;
- Работаем и дружим с западными заказчиками, есть возможность практиковать свой английский.
Возможность стать докладчиком или автором:
Evrone помогает развиваться сообществу разработчиков. Мы делаем самую большую в России конференцию по Ruby RubyRussia , проводим технические митапы, делаем свой новостной дайджест, а также спонсируем и помогаем в проведении конференций по Go, Python, React/Vue и функциональным языкам.
Наши инженеры выступают на ведущих конференциях России и Европы и вносят вклад в Open Source проекты, мы берем интервью у лидеров комьюнити и пишем статьи на самые горячие темы индустрии. В этом году мы ставили стенд и выступали на конференциях Highload и TeamLeadConf .
- Если вы хотите выступить на офлайн конференции, мы поможем вам подготовить контент для доклада и сделаем крутые слайды. DevRel Evrone (Григорий Петров) поможет подготовиться к выступлению на конференции, окажем поддержку на самой конференции и подготовим материалы с вашим докладом. Также Evrone оплатит вам все расходы на подготовку, поездку и участие в конференции;
- Если вы хотите выступить на онлайн конференции, помимо помощи по подготовке доклада и подбору конференции, мы организуем вам студийную съемку или трансляцию вашего доклада;
- У нас есть блоги на всех популярных платформах России и мира. Наши редакторы и профессиональные авторы еженедельно выпускают новые материалы;
- Если вы написали статью, мы нарисуем для нее иллюстрации и поможем вам ее оформить и опубликовать. Если у вас есть только идея - редакторы помогут сформулировать мысли, оформить пост самостоятельно и правильно опубликовать для максимального охвата. Конечно же, Evrone оплатит часы и любые затраты, потраченные на подготовку материала;
Возможность прокачаться в Open Source:
- Если у вас есть популярные open source проекты мы поможем с их продвижением и окажем поддержку в развитии;
- Если вы контрибьютите в популярные проекты с открытым исходным кодом, мы оплатим часы, которые вы на это потратили.
- Если вы ничего этого не делаете, но очень хочется начать в Evrone есть менторы, которые помогут вам сделать первые шаги: подберут задачки для старта, помогут решить их и правильно оформить pr.
Отдых и развиртуализация:
Мы собираемся несколько раз в году, чтобы увидеться лично. В Evrone есть несколько событий, которые собирают вместе весь наш коллектив. Поэтому, где бы вы ни находились, компания оплатит вам дорогу и все расходы на корпоратив.
