DevOps инженер в Платформу данных

Навыки

Обязанности

• 01Помогать команде Data Engineering в диагностике и устранении потенциальных инфраструктурных проблем, влияющих на выполнение Airflow DAGs
• 02Поддерживать команды Data Engineering по вопросам, связанным с Kubeflow Spark. Operator: проверка гипотез, помощь в отладке и подготовка тестовых SparkApplication
• 03Разрабатывать базовые Helm-чарты для быстрого прототипирования и проверки инфраструктурных гипотез
• 04Участвовать в миграции Airflow 2.x на Airflow 3.x
• 05Собирать требования к библиотекам и вносить изменения в Docker-образы, используемые Data Engineering-командой
• 06Развивать CI/CD-процессы для сборки и доставки DBT-моделей, включая blue-green deployment

Требования

• 01Уверенный опыт работы с Airflow в роли инфраструктурного инженера
• 02Понимание архитектуры Airflow и различий между LocalExecutor, KubernetesExecutor и CeleryExecutor
• 03Базовые, но уверенные знания Kubernetes и способность оперативно диагностировать и устранять типовые проблемы на уровне Deployment, StatefulSet, CRD и PVC
• 04Понимание принципов работы Helm, умение дорабатывать существующие Helm-чарты и создавать новые
• 05Базовое понимание GitOps-подхода и практический опыт работы с Argo CD будет преимуществом
• 06Базовый опыт работы с GitLab CI, включая умение собирать и поддерживать CI/CD-пайплайны на основе шаблонов
• 07Готовность брать ownership за критичные инсталляции и сервисы, с которыми ежедневно работают команды Data Engineering

Условия

• 01Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков
• 02Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога
• 03Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.
• 04Забота о семьях: гибкий подход, масштабные проекты для детей сотрудников
• 05Скидки и партнерские программы: на обучение, страхование, покупки
• 06Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников