Bell Integrator

Data Engineer\MLOpsEngineer

Не указана
  • Санкт-Петербург
  • Полная занятость
  • Полный день
  • От 3 до 6 лет
  • Hadoop
  • ETL
  • DWH
  • MLflow

ПРОЕКТ: в банковской сфере.

ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:

  • Опыт работы по специальности от 2-х лет;
  • Опыт разработки Python/Spark;
  • Понимание основ облачных технологий и технологий виртуализации и контейнеризации;
  • Опыт с экосистемой Hadoop (HDFS, Hive, Spark и пр.);
  • Опыт работы с ETL (Airflow, и пр.);
  • Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket / Git.

БУДЕТ ПЛЮСОМ:

  • Опыт работы с BigData в сфере DE/DS/DA;

  • Опыт работы с системами управления базами данных (Hadoop);

  • Опыт работы с платформами оркестрации контейнеров K8s, OpenShift;

  • Опыт внедрения DS-моделей в промышленный контур;

  • Опыт работы с Kafka;

  • Опыт работы с популярными РСУБД (Greenplum, Teradata, Oracle, PostgreSQL);

  • Понимание принципов построения хранилищ данных DWH.

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:

  • Разработка витрин и анализ больших объемов данных с использованием Python и Spark;
  • Написание скриптов Python (SQL-запросы) для сложной обработки и преобразования больших данных;
  • Работа с ETL и хранилищами данных;
  • Развертывание разработанных решений в производственной среде (ПРОМ) (Jenkins);
  • Взаимодействие с аналитиками проекта для определения требований и целей разработки
    Ведение технической документации по релизному процессу;
  • Фиксация договоренностей с заказчиком и поддержание актуальной документации по проектам;
  • Поддержка качества данных и обеспечение точности отчетов и наполнения витрин;
  • Внедрение разработанных DS-моделей в промышленную среду (MLOps).

МЫ ПРЕДЛАГАЕМ:

  • Возможность участия в интересных проектах.
  • Возможность профессионального и карьерного роста в компании.
  • Опыт работы в команде профессионалов.
  • Специальные тарифы для сотрудников в спортивные клубы и языковые курсы и пр.
  • Офисный формат работы в Санкт-Петербурге.