X5 Tech

Data Engineer (Python + Spark)

officeМосква

Навыки

**Наш стек**• PySpark{2,3} / Spark SQL• Hadoop / Hive / Trino / S3 / clickhouse / postgres/ greenplum• Airflow• Python3• Docker, YARN / k8s• pytest

Обязанности

  • 01Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно)
  • 02Настраивать хранение и доступность данных в DWH
  • 03Автоматизировать интеграцию данных: продажи, акции, цены, остатки, погода, календари
  • 04Работать в связке с Data Science-командой, обеспечивая стабильный и качественный поток данных для моделей
  • 05Участвовать в развитии платформы прогнозирования спроса, делая её более надёжной, масштабируемой и удобной

Требования

  • 01Официальное оформление с белой ЗП, полугодовые премии по результатам работы
  • 02Удобный офис с бесплатной парковкой на м. «Волгоградский проспект» / МЦД «Калитники»
  • 03Гибкий график работы (с 8/9/10 утра) / График работы: 5/2, с 9:00 до 18:15 (в пятницу — до 17:00)
  • 04Возможность работать удалённо или в гибридном формате
  • 05Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья
  • 06Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое
  • 07Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов
  • 08Обмен опытом через cообщества: 12 технических комьюнити от java до devops
  • 09Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge

Условия

  • 01Официальное оформление с белой ЗП, полугодовые премии по результатам работы
  • 02Удобный офис с бесплатной парковкой на м. «Волгоградский проспект» / МЦД «Калитники»
  • 03Гибкий график работы (с 8/9/10 утра) / График работы: 5/2, с 9:00 до 18:15 (в пятницу — до 17:00)
  • 04Возможность работать удалённо или в гибридном формате
  • 05Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья
  • 06Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое
  • 07Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов
  • 08Обмен опытом через cообщества: 12 технических комьюнити от java до devops
  • 09Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge