Data Engineer

LIAN — системный интегратор с фокусом в аналитике и управлении данными.

Мы работаем в трех направлениях:

1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем отчеты и дэшборды. Наш стек в BI включает все современные инструменты, в том числе open-source ПО.

2. Заказная разработка аналитических систем. Когда у нашего клиента есть специфичный запрос, мы разрабатываем аналитические системы с нуля. Часто применяем подходы BigData, Data Science, актуальные подходы к программному анализу данных и прогнозированию.

3. Запуск и ресурсное обеспечение команд разработки в комплексных проектах цифровой трансформации. Мы усиливаем команды наших партнеров и клиентов собственными сотрудниками и обеспечиваем максимально быстрый старт новых проектов. Среди наших заказчиков -крупные системные интеграторы, банки, нефтегазовые, химические производства, логистические компании, стартапы.

Мы ищем Java Data Engineer для проектирования системы выноса потоков данных из SAP CAR.

Цель проекта — освободить место в SAP CAR путем выноса части потоков данных. В долгосрочной перспективе — полный отказ от SAP CAR.

Обязанности:

- Разработка масштабируемой системы, заменяющей функциональность концентратора данных SAP CAR.
- Проектирование архитектуры системы для работы с потоковыми данными в режиме реального времени.
- Обработка и трансформация данных из различных источников для передачи в системы-потребители.
- Реализация бизнес-сценариев и триггеров для обработки данных.

- Опыт работы с Flink, Trino и S3.
- Знание Spark Core, Streaming и SQL (индексы, функции, написание запросов).
- Умение работать в команде и эффективно решать поставленные задачи.
- Аналитический склад ума и внимание к деталям.

Если вы готовы стать частью динамично развивающегося проекта, отправляйте свои резюме !