Data Engineer в высоконагруженный проект (Digital & AdTech)

О компании: Мы — динамически развивающийся стартап в сфере Martech. Наш продукт помогает среднему и крупному бизнесу оценивать результаты медийной рекламы. Нашим продуктом пользуются крупнейшие компании из разных отраслей от банков и екома до FMCG. Мы быстро растём, ценим экспертизу и инициативность, работаем с современными технологиями и амбициозными задачами.

Что предстоит делать:

В этой роли вы станете ключевым инженером, который построит и будет развивать real-time архитектуру для аналитики и обнаружения рекламного фрода на базе Apache Kafka. Мы обрабатываем более 500 млн событий в сутки, интегрируем десятки разнородных источников и обеспечиваем задержку обработки не более нескольких минут. Ваша задача — спроектировать надёжные, масштабируемые и высокопроизводительные пайплайны, которые напрямую влияют на эффективность крупнейших рекламодателей.

• Разработка и поддержка процессов обработки данных, создание витрин данных и data pipelines.
• Проектировать и внедрять архитектуру хранения и обработки digital-данных
• Работа с инструментами Airflow, Ytsaurus, Spark, Hadoop, Clickhouse для обеспечения надежности и эффективности обработки данных.
• Оптимизация и масштабирование существующих систем для работы с десятками миллиардов строк и терабайтами данных в месяц.
• Взаимодействие с командой аналитиков для улучшения качества данных и аналитических процессов.

Требования:

• Опыт работы от 1 до 3 лет в области обработки данных.
• Уверенные знания и опыт работы с Airflow, Spark, Hadoop, Clickhouse.
• Понимание принципов построения data pipelines и витрин данных.
• Способность работать с большими объемами данных и оптимизировать процессы их обработки.
• Умение работать в команде и эффективно взаимодействовать с другими специалистами.

Будет плюсом

• Опыт работы в рекламных агентствах, AdTech-компаниях или in-house у крупных digital-рекламодателей.

• Знание архитектуры AdTech/MarTech, принципов работы DMP/CDP, трекинга и атрибуции.

• Знание системы YTsaurus

• Навыки построения BI-дашбордов (Power BI, Tableau, Google Data Studio, Metabase и др.).

• Опыт настройки систем мониторинга и алертинга (Grafana)

Условия и преимущества:

• Гибкий формат работы: на месте работодателя, удаленно или гибридно.
• Полная занятость с графиком 5/2 и рабочим днем 8 часов.
• Возможность стать частью динамично развивающегося стартапа в сфере Martech.
• Работа над продуктом, который помогает бизнесу оценивать результаты медийной рекламы и мультиканальной аналитики.
• Участие в проектах с топовыми компаниями и рекламными агентствами.