Hadoop разработчик (удаленная работа)

Вакансия: Hadoop разработчик

Описание вакансии

IT-компания GNIVC - партнер государственных компаний и лидеров российского бизнеса, разработчик и системный интегратор крупнейших государственных информационных систем, а также коммерческих решений для налогового мониторинга.

• Компания входит в ТОП-100 лучших работодателей страны и 10 место в категории "IT-компании" 2024 года по рейтингу работодателей hh.ru среди крупных компаний;
• Мы в 25% лучших по уровню счастья среди компаний отрасли IT и России 2024 по версии Happy Job;
• Являемся аккредитованной ИТ-компанией.
  
  Ищем Hadoop разработчика для укрепления команды проекта Информационно аналитическая система Контрольного блока (в части работы с Платформой данных ЕИАП АИС Налог ) проект для ФНС России.

Обязанности:

• разработка и поддержка ETL-пайплайнов обработки данных;
• оптимизация выполнения Spark-задач (настройка памяти, партиционирование);
• анализ execution plans, выявление узких мест производительности;
• создание и поддержка витрин данных для аналитики;
• работа с большими объемами данных в распределенной среде.

Требования:

• SQL - экспертный уровень (сложные запросы, оконные функции, оптимизация);
• Hive - работа с метахранилищем, оптимизация запросов;
• Hadoop (HDFS) - работа с распределенной файловой системой;
• базовые знания Scala (будет плюсом);
• понимание принципов построения ETL/ELT процессов;
• опыт оптимизации производительности распределенных вычислений;
• умение находить узкие места в SQL-запросах и оптимизировать их;
• понимание как взаимодействовать с конфигурацией параметров, что нужно поменять для повышения производительности;
• работа с большими данными.

Мы предлагаем:

• гибкие форматы работы: возможность работы в офисе, по гибридному графику или полностью дистанционно на территории РФ;
• рабочий график: пятидневная рабочая неделя (Пн. Чт. с 09:00 до 18:00, Пт. с 09:00 до 16:45);
• достойное вознаграждение: конкурентная заработная плата по результатам собеседования, а также премии за эффективную работу и достигнутые результаты;
• официальное трудоустройство: полное соблюдение требований ТК РФ, включая оплачиваемые отпуска (с дополнительной выплатой 50% от оклада после 11 месяцев работы в Компании) и выплату заработной платы дважды в месяц;
• забот у о здоровье:
  • компенсация больничного листа продолжительностью до 7 дней с сохранением полной оплаты, эквивалентной рабочему дню,
  • добровольное медицинское страхование (ДМС) по окончании испытательного срока, с широким перечнем ведущих медицинских учреждений, включая качественную стоматологию,
  • возмещение до 50% затрат на занятия спортом;
• развитие и обучение:
  • профессиональное обучение и сертификация за счет компании,
  • организация внутренних и внешних митапов, хакатонов, конференций, семинаров и тренингов,
  • партнерские программы по изучению иностранных языков и развитию профессиональных навыков от Skyeng и Skillbox,
  • доступ к корпоративной библиотеке на платформе Alpina Digital;
• дополнительные выходные: возможность взять 5 дополнительных оплачиваемых выходных (ресурсных) дней в течение календарного года (с 1 января до 31 декабря) для сотрудников, проработавших в компании более 11 месяцев.