Robusta

ETL-разработчик

Не указана
  • Москва
  • Полная занятость
  • Гибкий график
  • От 3 до 6 лет
  • SQL
  • DWH
  • MS SQL
  • ETL
  • Greenplum

Мы вывели на рынок несколько успешных IT-проектов и собрали их в единую экосистему, которую назвали “Robusta".
У нас экспертная в своей сфере и креативная команда. Мы много работаем и круто отдыхаем (смотри Instagram: robusta.team), умеем делать классные проекты и всегда нацелены на высокий результат.
На текущий момент нам требуется ETL-разработчик уровня middle+/senior!

Обязанности:

  • Организация ETL-процесса по выгрузке данных из S3 в core-слой на Greenplum v6 (ADB, Arenadata дистрибутив);
  • Переработка T-SQL кода в plpgsql, используемых для перерасчета аналитических полей на core слое;
  • Совместная работа с DBA-архитектором на данном проекте.

Требования:

  • Понимание различий PostgreSQL & Greenplum;
  • Понимание механизма работы QE/QD (query executor & query dispatcher), и как исполняется SQL-запрос в Greenplum-кластере, включая планы запросов (redistribute, broadcast, gather motions);

  • Понимание механизма дистрибьюции данных на сегмент-инстансах Greenplum, и как исправлять перекосы данных (skews);

  • Понимание разницы механизмов работы Heap & AOP (append-optimzed) таблиц в Greenplum, включая понимание “ограничений” колоночного формата хранения данных;

  • Понимание различий между логическими моделями: звезды, снежинки и DataVault;

  • Опыт с технологическим стеком: Greenplum, PXF, gpfdist, AirFlow, Spark.

Условия:

  • Удалённая работа либо гибрид/офис, по вашему желанию :)
  • Работу без бюрократии и ненужных ритуалов. Мы работаем вместе, чтобы помочь вам реализовать ваши амбиции, а компании — расти;
  • ДМС: нам важно, чтобы наши сотрудники развивали свои компетенции и были здоровы;
  • Невероятную корпоративную жизнь: от походов в музеи до совместных путешествий и rave-вечеринок;
  • Гибкое время начала рабочего дня.

Если тебя заинтересовала наша позиция, то непременно отправляй свой отклик, мы свяжемся с тобой для более детального общения.