ГЛОБУС

Data engineer\ETL developer

230 000 - 350 000 RUR
  • Екатеринбург
  • Полная занятость
  • Полный день
  • От 3 до 6 лет
  • Hadoop
  • Spark
  • Scala
  • Greenplum
  • ETL
  • Должность: Data-инженер/ETL-разработчик

    Формат работы: офис Екатеринбург (Розы Люксембург,56а)

    Занятость: Полная

    Компания: ПАО “Сбербанк”

    Работодатель: ООО "Глобус-ИТ"

    Команда. О проекте.

    Сбербанк развивает платформу данных. В составе платформы имеются различные технологические стеки и системы хранения: Hadoop, Postgres, GreenPlum, OpenShift. Мы ищем опытных специалистов, профессионалов в работе с данными, готовых совместно развиваться и делиться компетенциями. Преимущество отдаем кандидатам с техническим образованием. Сейчас нам нужен дата инженер для качественного улучшения работоспособности собственного ETL движка и перевода расчетов данных в облачную платформу.

    Используемые технологии и инструменты:

  • Основные технологии: Hadoop, Spark , GreenPlum, Oracle

  • Языки программирования и инструменты: SQL, PGSQL, Spark (Data FrameWork)

  • Системы управления кодом и CI/CD: BitBucket (Git), Jenkins

  • Управление задачами и документацией: Jira, Confluence

  • Работа по методологии Agile

Задачи:

  • Проектирование и разработка ETL-потоков;

  • Проектирование архитектуры и модели витрин данных

  • Выстраивание потоков зависимостей загрузок;

  • Реализация проверок качества загружаемых данных;

  • Ведение технической документации по потокам данных.

Что мы ждем от кандидата:

  • Высшее техническое/математическое образование;

  • Опыт работы на проектах построения Хранилищ данных в качестве ETL-разработчика или схожего функционала от 3 лет;

  • Умение писать сложные SQL-запросы - обязательно;

  • Опыт оптимизации ETL-потоков;

  • Опыт выстраивания зависимостей загрузки;

  • Опыт реализации переиспользуемых процедур: интеграции данных; формирования бизнес и технической-истории, формирования суррогатных ключей и так далее;

  • Опыт практической работы со следующими инструментами: Hadoop, HBase, Spark, Bash/shell, C++, java или scala, GreenPlum.

От нас:

  • Трудоустройство по ТК РФ (обсуждаемо);

  • Работа в аккредитованной ИТ компании;

  • Адаптивные бизнес-процессы внутри компании;

  • Достаточная степень независимости в принятии решений;

  • Отличная возможность вместе с профессиональной командой создавать продукты, которыми будут пользоваться миллионы людей;

  • Расширенный ДМС;

  • Комфортабельное рабочее место, необходимое оборудование;

  • Обучение за счет компании, участие в митапах