Breakout-Group B.V.

Data Engineer

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Python
  • PostgreSQL
  • dbt
  • Apache Kafka
  • Apache Airflow

Мы занимаемся разработкой сложных систем и приложений в айгейминг сфере. Это качественные и современные продукты под все платформы.

В нашу команду анализа данных мы ищем инженера данных, который будет развивать инфраструктуру данных: проектировать и поддерживать хранилище данных, внедрять инструменты для эффективной работы аналитиков.

Задачи:

  • Разработка и поддержка аналитического хранилища и витрин данных;

  • Внедрение и сопровождение инструментов для трансформации и оркестрации данных (dbt, Airflow);

  • Построение и оптимизация ETL/ELT-процессов, включая стриминг (Kafka, NiFi и др.);

  • Оптимизация производительности запросов и процессов обработки данных;

  • Интеграция данных из различных источников (API, Google Sheets, Airtable и др.).

Требования:

  • Опыт работы на позиции Data Engineer (3+ лет) со схожим стеком;

  • Опыт внедрения и работы с dbt в продакшене;

  • Владение Airflow для построения и поддержки пайплайнов;

  • Опыт работы со стримингом данных (Kafka, NiFi или аналоги);

  • Python для построения дата-пайплайнов и интеграции источников, Git для командной работы.

  • SQL для разработки и оптимизации хранилищ и запросов на больших объёмах данных;

  • Опыт построения DWH / Data Lake;

Будет плюсом:

  • Настройка мониторинга и алертинга дата-процессов;

  • Понимание концепций тестирования кода и контроля качества данных.

Условия:

  • Полная удаленка, гибкое начало рабочего дня;

  • Работа в команде профессионалов, готовых поддержать твои инициативы;

  • Предоставляем технику по запросу;

  • Развитие полезных навыков: оплачиваем участие в конференциях и профильные курсы (70% стоимости), покупаем нужную литературу.