Разработчик (Scala, Python, Airflow, SQL)

Работа в Т1 сочетает в себе преимущества инновационной ИТ-компании и крупного холдинга — стабильность и финансовую надежность, социальные гарантии и возможность развиваться в открытом ИТ-сообществе, масштабные задачи и гибридный формат работы

Большим идеям нужна большая командаВ рамках направления разработки ИТ-решений мы помогаем ускорить цифровую трансформацию с помощью гибких и быстроадаптируемых

решений мирового уровня: современные ИТ-продукты, системы работы с большими данными

и комплексные решения для фронт- и бэк-офисов. Наши разработки повышают гибкость и эффективность работы банковских команд.Вместе с нами ты будешь:- Разработка dag airflow для автоматизации etl потоков;- Устранение инцидентов;- Оптимизация объектов хранения;- Оптимизация и доработка методов загрузки scala/hadoop/spark;- Разработка unuit тестов и интеграционных автотестов- Security champion: анализ и устранение уязвимостей кода.- Триггерная репликация: Создание модуля генератора дагов- Безусловная репликация в DAPP изменений атрибутного состава ЦЕХ-объектов;- Миграция на cloud-airflow;- Разработка инструментов для процесса data qualityКакие знания и навыки для нас важны:Языки программирования:- Python (middle)- Scala (middle)- SQL (middle)СУБД:- Hive, Iceberg, Impala, Kyuubi- GreenPlum- PostgreSQL- ClickHouse- oracle- ms sqlИнструменты разработки:- Git- IDE Intellij IDEA/Pycharm- DBeaverТехнологии:- Hadoop (hdfs, yarn)- Spark (3.2+ версия)- Airflow- ozone, aws s3- jdbc- maven, pip- k8s- rest api- Kafka- Linux- Grafana- Victoria Metrics- DockerПонимание в области Big Data:- Data Lake, Data Lakehouse, DWH- ETL, ELT- OLTP, OLAP- Файловые форматы, табличные форматы- Качество данных