РСХБ-Интех
Senior Data Engineer
Зарплата не указана
Москва
Обязанности
- 01Разработка, поддержка и оптимизация пакетных пайплайнов данных
- 02Разработка и поддержка инструментов по работе с данными
- 03Работа с большими данными в распределенной среде
- 04Интеграция и обработка данных из различных источников
- 05Проектирование новых решений в области данных
Требования
- 01Опыт работы инженером данных от 5 лет
- 02Опыт работы с Airflow (разработка DAG'ов, сенсоры, кастомные операторы)
- 03Опыт с Apache Spark (PySpark, DataFrame API, оптимизация джобов)
- 04Знание S3 API, HDFS, основ форматов данных (Parquet, ORC, Avro) и табличных форматов (Hoodie, Iceberg, Hive)
- 05Опыт работы с Python (Pandas/Polars, SQLAlchemy)
- 06Опыт работы с системами контроля версий (Git, GitLab, CI/CD)
- 07Опыт взаимодействия с хранилищами данных и базами данных (Greenplum, PostgreSQL)
- 08Опыт работы с Trino/Presto, ClickHouse
- 09Опыт построения стриминг пайплайнов (Debezium, Kafka, Flink)
- 10Понимание принципов DataOps, Observability и DQ (Soda, Great Expectations)
- 11Опыт работы с фреймворками трансформации данных (dbt, SQLMesh)
- 12Системное мышление, опыт дизайна Data-решений
- 13Ответственность, умение вести разработку фич
- 14Уверенное знание работы операционных систем Linux
Условия
- 01Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д.)
- 02Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы
- 03Забота о здоровье: ДМС после испытательного срока (включает стоматологию)
- 04Прозрачный доход: оклад (по итогам интервью) + ежеквартальные премии по результатам KPI
- 05Гибкий график или полная удаленка (по итогам общения с командой)
- 06Комфортные и современные офисы в городах присутствия (Москва, Санкт-Петербург, Уфа, Брянск, Новосибирск и др.)
- 07Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (скидки на спортзалы, рестораны, маркетплейсы и т.д.)