Аренадата Софтвер

Инженер (Hadoop)

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Hadoop
  • Kafka
  • NiFi
  • Linux
  • Ansible

Обязанности:

  • Участие в пуско-наладочных работах по продуктам компании (на базе Hadoop, Kafka, NiFi): установка, первичная настройка и тестирование;
  • Проведение исследовательских работ (proof of concept), пилотных проектов, нагрузочных тестов на базе продуктов компании по требованиям заказчика и дополнительному описанию от Архитектора;
  • Подготовка инструкций по функциональным возможностям продуктов компании по требованию заказчика;
  • Выезд в ЦОД заказчика для проведения пуско-наладочных работ по требованию заказчика.

Мы ждем, что вы:

  • Имеете опыт установок, эксплуатации, сопровождения, оптимизации и конфигурирования одной или нескольких систем: Hadoop, Kafka, NiFi, Airflow, Spark, Trino, Impala, Ranger;
  • Имеете уверенное знание Linux - мы используем дистрибутивы RedHat/Centos и AltLinux;
  • Имеете базовое знание одного из скриптовых языков программирования (Python или Bash);
  • Имеете отличное понимание работы сетевых протоколов (модель OSI);
  • Имеете опыт системного администрирования Linux-серверов.

Плюсом будет:

  • Знание Ansible, git, Grafana;

  • Опыт проектирования и реализации процессов CI/ CD;

  • Знание принципов работы систем и алгоритмов аутентификации и авторизации на базе ActiveDirectory, LADP, Kerberos, FreeIPA и других;

  • Опыт эксплуатации и сопровождения серверного оборудования;

  • Опыт администрирования различных СУБД, выполнение бэкапов и ресторов;

  • Опыт работы с Kubernetes;

  • Опыт работы с интеграциями систем;

  • Опыт работы в качестве дата-инженера.