Mechta.kz TM ( ТОО Мечта Маркет )

Data Engineer

Не указана
  • Астана
  • Полная занятость
  • Полный день
  • От 3 до 6 лет

ДОБРЫЙ ДЕНЬ, УВАЖАЕМЫЙ КАНДИДАТ!

На сегодняшний день мы, Команда Мечты, ищем Инженера данных.
прошу написать сопроводительное письмо, почему именно вы подходите на эту роль.

ЧЕМ ВЫ БУДЕТЕ ЗАНИМАТЬСЯ:

  • ETL и оркестрация

Разработка и поддержка ETL-процессов в Apache Airflow
Оптимизация и мониторинг пайплайнов

  • Трансформации данных (dbt)

Разработка моделей dbt для DWH
Настройка CI/CD для dbt

  • Работа с хранилищем данных (DWH)

Проектирование и оптимизация DWH в PostgreSQL
Создание агрегированных витрин в ClickHouse

Интеграция ClickHouse в общий стек аналитики

  • Интеграция с внешними системами

Запрос и обработка данных из REST API
Загрузка данных в SQL-базы (PostgreSQL, ClickHouse)

  • Производительность и надежность

Оптимизация SQL-запросов

Настройка мониторинга и алертов

ЧЕГО МЫ ОТ ВАС ОЖИДАЕМ:
Опыт работы с Apache Airflow (DAG, сенсоры, XCom)
Глубокое знание SQL (PostgreSQL, ClickHouse)
Опыт работы с dbt (модели, макросы, тестирование)
Интеграция с REST API (requests, JSON, OAuth)
Python (pandas, requests, sqlalchemy)
Знание основ OLAP/OLTP, принципов построения DWH
Будет плюсом: Kafka / стриминг данных
Мониторинг (Prometheus, Grafana, ELK)
Опыт с BI-инструментами (Superset, Metabase, Tableau)

ЧТО МЫ ПРЕДЛАГАЕМ:

  • Конкурентоспособная заработная плата (обговаривается при собеседовании);
  • Высокий уровень автономности;
  • Минимум бюрократии;
  • Разноплановые проекты;
  • Сложные задачи и вызовы;
  • Своя кухня;
  • Компенсация участия в конференциях;
  • Своевременная выплата З/П;
  • Комфортные условия работы;
  • График работы: 5/2, с 8:00 до 17:00, обед с 12:00 до 13:00.