Мы развиваем Цифровую Платформу Данных (ЦПД) - корпоративное DWH-решение для сбора, обработки и предоставления данных бизнес-подразделениям.
Ищем Senior-разработчика, который будет участвовать в развитии архитектуры платформы, обеспечении стабильности процессов и повышении качества данных.
Задачи:
- Сбор, анализ и формализация требований бизнес-заказчиков
- Проектирование и реализация решений в рамках ЦПД
- Разработка и оптимизация ETL/ELT-процессов
- Настройка, мониторинг и отладка регламентных процессов загрузки и трансформации данных
- Мониторинг качества данных, анализ инцидентов, устранение сбоев
- Восстановление корректности данных при инцидентах
- Участие в проектах по оптимизации, автоматизации и повышению надежности платформы
- Подготовка технической документации
- Обмен экспертизой и менторинг внутри команды
Наши ожидания:
- Понимание архитектуры DWH (Staging / ODS / Data Marts)
- Опыт работы с большими объемами данных
- Понимание процессов CDC / ETL / ELT
- Опыт работы с реляционными и нереляционными источниками данных
Базы данных:
Уверенные знания SQL:
- написание и оптимизация сложных запросов
- работа с процедурами, функциями, job
- анализ планов выполнения
- Опыт работы с PostgreSQL / Greenplum
- Понимание принципов работы MPP-систем
Инструменты
- Уверенная работа с Git (ветвление, code review)
- Python для задач обработки данных
- Опыт работы с S3-совместимыми хранилищами
- Опыт работы с инструментами управления пайплайнами (dbt, Dagster или аналоги)
- Опыт работы с ETL-инструментами (Informatica PowerCenter или аналоги)
- Навыки мониторинга и поддержки продакшн-систем
Будет плюсом
- Опыт построения процессов Data Quality
- Опыт автоматизации CI/CD для data-пайплайнов
- Опыт миграции DWH или оптимизации производительности
- Понимание принципов Data Governance
- Самостоятельно декомпозирует бизнес-задачи в технические решения
- Предлагает архитектурные улучшения
- Берет ответственность за стабильность и качество данных
- Участвует в принятии технических решений
Наши условия:
- Годовой бонус по результатам работы
- ДМС, материальная помощь на случай важных событий, скидки от партнеров
- Команда экспертов, которые любят свое дело и всегда готовы поддержать
- Современный офис и вся необходимая техника предоставляется.