Обязанности:
- Анализ и валидация данных из различных источников, сверка между системами.
- Обработка больших объемов данных для интеграции с Data Lake.
- Обновление стороннего ПО по инструкции.
- Подготовка документов по таблицам/датамартам и технологическим процессам, внесение в базу знаний.
- Анализ существующих таблиц для оптимизации процессов.
- Консультирование сотрудников по структуре данных и технологиям обработки.
- Обеспечение качества и своевременности предоставляемой информации.
- Поддержка решений Big Data и Data Lake.
- Сбор и анализ финансовых показателей.
- Подготовка отчетности для руководства.
Требования:
Опыт в дата инженерии в DWH (Oracle) и Data Lake (Hadoop)
Языки программирования:
-
SQL
-
Python
-
Bash
Что используем из инструментов/технологий:
-
Airflow
-
Kafka
-
Debezium
-
PySpark
-
Hive
-
Flink
Будет плюсом:
-
dbt, git
-
Знания в области технологий LakeHouse (Apache Iceberg, S3, Trino, Starburst)
- Достойную заработную плата;
- После испытательного срока льготы от Компании по категориям:
1. Медицина (приёмы врачей, анализы, медикаменты, УЗИ, МРТ и т. п.)
2. Образование (курсы, книги, обучение в школах и дет сады для детей)
3. Фитнес (тренажерные залы, спортивные секции, танцы, бассейн, йога и т. п.)
4. Путешествия (путевки за пределы и внутри РК, авиа и Ж/Д билеты, гостиницы)
- Мобильную связь;
- Команду профессионалов, которые заточены на результат;
- Возможность как вертикального, так и горизонтального карьерного роста.