WILDBERRIES

Senior Hadoop engineer

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Hadoop
  • SRE
  • Bigdata
  • Hadoop Vanilla
  • HDFS
  • YARN
  • Hive
  • Trino
  • Spark
  • Airflow
  • JupyterHub,
  • FreeIPA KDC
  • Knox
  • Ranger
  • Hue
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ.

Направление работы:

Сейчас мы ищем Senior Hadoop инженера. Талантливого, преактивного и опытного BigData/DWH SRE в команду инфраструктуры. Строим с нуля аналитическое хранилище компании.

Вы нам подходите, если:

  • Имеете опыт от 3х лет в администрировании Linux;
  • Имеете от 1 года опыта в администрировании Hadoop/Bigdata/DWH стека (Кластер Hadoop Vanilla одной из последних версий, компоненты: HDFS, YARN, Hive, Trino, Spark, Airflow, JupyterHub, FreeIPA KDC, Knox, Ranger, Hue).

Вам предстоит:

  • Принимать участие в проектировании технической архитектуры хранилища;
  • Собирать и пакетировать компоненты кластера;
  • Автоматизировать деплой и конфигурацию компонентов кластера с помощью Ansbile/Helm;
  • Организовать мониторинг и алертинг ключевых метрик кластера;
  • Организовать отказоустойчивость, безопасность и бэкапирование;
  • Решать проблемы низкой производительности, исправлять ошибки в работе кластера.

Условия для сотрудников:

  • Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;
  • Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;
  • Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;
  • Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;
  • Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;
  • Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.