Мы — команда инженеров и датасаентистов в крупнейшем маркетплейсе с миллионами пользователей, хайлоадом и бигдатой. Нас знают все.
В связи с активным ростом проекта, находимся в поиске Data Engineer в одну из команд Поискового движка.
Задачи:
- Разработка витрин данных для аналитиков: сбор требований и реализация;
- Автоматизация контроля качества и полноты данных;
- Интеграция новых источников данных;
- Оптимизация запросов и процессов трансформации данных.
Требования:
- Уверенное владение Python, SQL, Airflow;
- Опыт работы с БД: SQL (PostgreSQL, Greenplum, Clickhouse) / NoSQL;
- Опыт в моделировании данных;
- Умение организовывать ETL-процессы;
- Умение оптимизировать запросы;
- Опыт работы с большими объёмами данных;
- Знание Docker/k8s и команд консоли unix.
Желательно:
- Опыт с DBT, Kafka.
Предлагаем:
-
Сложные интересные задачи;
-
Хорошую зарплату;
-
Свободу в принятии решений;
-
Профессиональный рост в команде увлеченных инженеров;
-
Удаленку или офис;
-
Минимум формализма и гибкий график;
-
Ротацию между проектами (если захотелось чего-то нового).
Аккредитация Минцифры: предоставляем все льготы для ИТ-специалистов.