Senior Data Engineer в команду платформы данных

Навыки

Обязанности

• 01Развитие платформы: внедрение, настройка и поддержка компонентов платформы данных, обеспечение их отказоустойчивости и масштабируемости
• 02Архитектура данных: проектирование и оптимизация архитектуры хранения больших данных, разработка эффективных схем данных под аналитические задачи
• 03ETL/ELT процессы: настройка и оптимизация пайплайнов обработки данных (как потоковых, так и батчей), обеспечение качества и надежности данных на всех этапах
• 04DevOps для Данных: мониторинг производительности кластеров, тюнинг запросов, управление доступом и поддержка пользователей (аналитиков, дата-сайентистов)
• 05Исследования: быстрое погружение в новые предметные области и технологии для решения нестандартных задач

Требования

• 01Опыт от 5 лет в области Data Engineering
• 02Глубокое понимание принципов работы с Big Data (распределенные вычисления, партиционирование, шардирование)
• 03Умение проектировать сложные архитектуры решений для обработки данных
• 04Отличное знание SQL и опыт оптимизации сложных запросов (особенно для OLAP-систем)
• 05Опыт работы с потоковой обработкой данных и батч-процессами
• 06Уверенное владение Python для написания скриптов автоматизации, интеграционных задач
• 07Практический опыт настройки CI/CD пайплайнов для Data проектов: линтеры, тесты, автоматическая выкладка дагов Airflow или dbt-моделей

Условия

• 01Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое
• 02Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании
• 03Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.
• 04Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников
• 05Скидки и партнерские программы: на обучение, страхование, покупки и многое другое
• 06Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников