ИЦ АЙ-ТЕКО

Data engineer

Не указана
  • Москва
  • Полная занятость
  • Полный день
  • От 3 до 6 лет
  • Java
  • Hadoop
  • Spark
  • Apache Hive
  • SQL

КОМПАНИЯ «АЙ-ТЕКО» - ведущий российский системный интегратор и поставщик информационных технологий для корпоративных заказчиков. Активно действует на рынке IT России с 1997 года, входит в ТОП-400 крупнейших российских компаний, ТОП-10 крупнейших IT-компаний России.

В связи с активным развитием проектов в компании открыта вакансия DATA ENGINEER.

ТРЕБОВАНИЯ:
∙ опыт построения dwh;
∙ построение логических и/или физических моделей данных;
∙ опыт построения таблиц с версионированием данных (бизнес/техническая история , ескд2);
∙ знание etl процессов;
∙ проектирование алгоритмов загрузки (инит/архив, инкремент, выделение дельты изменений);
∙ уверенные знания SQL;
∙ опыт работы с инструментарием Hadoop (Spark, Hive, HDFS, YARN);
∙ разработка java дистрибутива etl процесса;
∙ работа с БД с использованием Spark java framework;
∙ настройка параметров spark фреймворка (оптимизация Spark контекста);
∙ работа с датафреймами и датасетами;
∙ оптимизация плана запросов.

ДОПОЛНИТЕЛЬНО (БУДЕТ ПЛЮСОМ):
∙ опыт работы со Scala

МЫ ПРЕДЛАГАЕМ:
∙ работу в стабильной компании, "белую" заработную плату;
∙ оформление в соответствии с ТК РФ с первого дня работы;
∙ расширенный социальный пакет: ДМС (включая стоматологию), корпоративные скидки;
∙ профессиональное обучение и развитие;
∙ снабжаем всей необходимой современной техникой: мощный ноут привезут прямо в день оформления.