Ищем специалиста на проект Сбера для построения хранилища данных с целью формирования аналитической управленческой отчетности.
Твои задачи:
Твои задачи:
- Проектирование и разработка ETL-потоков;
- Проектирование архитектуры и модели витрин данных;
- Выстраивание потоков зависимостей загрузок;
- Реализация проверок качества загружаемых данных;
- Ведение технической документации по потокам данных.
Используемые технологии и инструменты:
- Основные технологии:Hadoop, Spark , GreenPlum, Oracle;
- Языки программирования и инструменты: SQL,PGSQL, Spark (Data FrameWork);
- Системы управления кодом и CI/CD: BitBucket (Git), Jenkins;
- Управление задачами и документацией: Jira, Confluence;
- Работа по методологии Agile.
- Высшее техническое/математическое образование;
- Опыт работы на проектах построения Хранилищ данных в качестве ETL-разработчика или схожего функционала от 3 лет;
- Умение писать сложные SQL-запросы - обязательно;
- Опыт оптимизации ETL-потоков;
- Опыт выстраивания зависимостей загрузки;
- Опыт реализации переиспользуемых процедур: Интеграции данных, Формирования бизнес и технической-истории и так далее.
- Опыт практической работы со следующими инструментами: Hadoop, HBase, Spark, Bash/shell , c++, java или scala, GreenPlum.
- Оформление по ТК РФ;
- ДМС с первого месяца работы (поликлиническое обслуживание, вызов врача на дом, услуги скорой помощи, экстренная госпитализация, вакцинация от гриппа, базовые услуги стоматологических клиник и психологическая поддержка, оформление международного страхового полиса);
- Ноутбук HP для работы;
- Обучение и участие в конференциях за счет компании, повышение; квалификации в корпоративном университете Лиги;
- Участие не только в профильных профессиональных сообществах Лиги, но и сообществах по интересам (игры, спорт, хобби и т.п.).