X5 Tech

Data Engineer (Python)

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Python
  • Apache Spark
  • Gitlab
  • GitHub
  • Jenkins
  • Trino
  • Apache Airflow
  • Clickhouse
  • Docker
  • Kubernetes
  • PostgreSQL
  • Apache Kafka
  • Redis
  • RabbitMQ
Обязанности:
  • Разработка механизма управления потоками в контуре дата-платформы, построенной в соответствие с архитектурой Lakehouse и методологией Data Mesh.
Требования:
  • Опыт разработки на Python (2+ года), глубокое понимание асинхронности, ООП, декораторов, контекстных менеджеров и best practices.
  • Опыт в дата-инженерии: работа с ETL/ELT, потоковыми и batch-процессами, инструментами вроде Airflow, Dagster, Prefect и т.п.
  • Понимание принципов проектирования фреймворков и библиотек — вы умеете писать код "для других разработчиков".
  • Знание принципов работы с большими данными (Spark, Dask, pandas на больших датасетах — плюс).
  • Опыт работы с базами данных и хранилищами (PostgreSQL, ClickHouse, BigQuery, Snowflake и др.).
  • Навыки работы с CI/CD, контейнеризацией (Docker), оркестрацией (Kubernetes — плюс).
  • Умение писать тесты (unit, integration), следить за качеством кода и его поддерживаемостью.
Условия:
  • официальное оформление с белой ЗП, ежеквартальные премии по результатам работы;
  • Удобный офис рядом с м. «Добрынинская» / удобный офис с бесплатной парковкой на м. «Волгоградский проспект» / МЦД «Калитники»
  • гибкий график работы (с 8/9/10 утра) / График работы: 5/2, с 9:00 до 18:15 (в пятницу — до 17:00);
  • возможность работать удалённо или в гибридном формате;
  • широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья;
  • возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое;
  • программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов;
  • обмен опытом через cообщества: 12 технических комьюнити от java до devops;
  • яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge;