Middle Java Developer в MWS Data Bridge [Big Data, МТС Веб Сервисы]

МТС — это мультисервисная цифровая экосистема. Мы создаём и развиваем сервисы в сфере мобильной связи, больших данных, искусственного интеллекта, облачного хранения, медиа и финансов — все они делают жизнь людей проще и интереснее.Big Data – один из ключевых юнитов МТС. Наши технологии применяются практически во всех направлениях компании - финансы, маркетинг, обслуживание, планирование сети, HR, розница.Команда центра Big Data находится в поиске Middle Java Developer в MWS Data Bridge для усиления команды продукта, в связи с ростом количества новых задач.Команда продукта MWS Data Bridge разрабатывает единый инструментарий для работы с большими данными внутри центра BigData МТС. Задача продукта – предоставлять удобные и простые инструменты Data Engineering/Data Science для загрузки/выгрузки/трансформации данных, проверки качества данных, управления метаданными и оркестрации пайплайнов.Наши инструменты являются ядром платформы Big Data MTS, каждый день загружая и обрабатывая десятки ТБ данных. Поэтому к разрабатываемым инструментам и сервисам предъявляются высокие требования по отказоустойчивости и качеству в целом.

Обязанности

— Разрабатывать новые инструменты и библиотеки обработки больших данных

— Разрабатывать новые коннекторы для Spark

— Разрабатывать библиотеки диалектов SQL для Apache Spark

— Осуществлять подготовку к выводу внутренних решений в open-source

— Участвовать в создании современной платформы больших данных

Требования

— Опыт разработки на Java от 3 лет

— Знание Spark

— Опыт работы с JDBC

— Опыт работы с базами данных

— Опыт работы с Docker

— Опыт использования CI/CD инструментов: Gitlab CI/Jenkins

— Опыт написания unit и интеграционных тестов

Условия

— Собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability - не будут для вас проблемой, вы сможете сосредоточиться на фичах Профессиональные гильдии инженеров по направлениям, чтобы поддерживать друг друга и обмениваться опытом

— Внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации

— Участие во внешних IT конференциях. Мы выступаем на HighLoad++, DataFest, Mobius, Test Driven Conf, Joker, DevOps, Матемаркетинг и даже проводим собственную конференцию по архитектуре Hello, conference!

— Полезные курсы и вебинары в корпоративном университете и электронные библиотеки

— Медицинскую страховку с 1 месяца со 100% покрытием расходов, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой

— Единую подписку МТС Premium — KION light в онлайн-кинотеатре KION, сервис МТС Music, 30 дней бесплатного пользования подпиской OZON Premium Скидки и предложения от партнеров на фитнес, занятия английским и прочее