IBS

Data Engineer

Не указана
  • Новосибирск
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
Обязанности:
  • Разработка и проектирование архитектуры БД, создание и манипуляции с БД (PostgresQL, Greenplum, Clickhouse, а также SQLAlchemy)
  • Написание программ распределенных вычислений (Spark) и ETL процессов
  • Написание докстрингов и нормальных наименование переменных функций/иных сущностей в коде
Требования:
  • Глубокие теоретические знания стека технологий и практический опыт (Spark,Hadoop, Hive; Kubernetes (K8S))
  • Опыт оптимизации запросов
  • Опыт написания программ распределенных вычислений (Spark) и ETL процессов
  • Опыт работы Python 3.7 + Spark 2.4 / Spark 3.0
  • Опыт проведения Code Review
  • Понимание процессов CI/CD
  • Docker Git, GitLab, CI / CD, разрешение конфликтов Shell (bash), Linux
Условия:
  • ДМС (включая стоматологию), страхование жизни и онкозаболеваний, психологическая поддержка.Возможность подключения ДМС для ближайших родственников.
  • Удобная цифровая система адаптации с элементами геймификации, которая поможет быстро и интересно погрузиться в корпоративную жизнь и процессы компании
  • 2 недели в рекреационном офисе в Геленджике с видом на море за счет компании
  • Спортивные клубы (футбол, волейбол, настольный теннис, бег, йога и шахматы), ежегодный Фестиваль спорта и удобные спортивные зоны в каждом офисе
  • Яркие корпоративные мероприятия — от тематических вечеринок до спортивных мероприятий и выездных праздников.
  • 6 000+ специальных предложений от партнеров: от скидок в ресторанах и спортзалах до льготных условий на образование, недвижимость и авто.
  • Удобная цифровая система адаптации с элементами геймификации, которая поможет быстро и интересно погрузиться в корпоративную жизнь и процессы компании
  • Развивайтесь вместе с нами! Доступ к 400+ онлайн-курсам, большой библиотеке, а также оплата внешних обучений и профессиональных конференций за счет компании.